我國科學家建立生成式模型為醫(yī)學AI訓練提供技術(shù)支持


中國產(chǎn)業(yè)經(jīng)濟信息網(wǎng)   時間:2024-12-23





  記者從北京大學未來技術(shù)學院獲悉,北京大學與溫州醫(yī)科大學的研究團隊建立一種生成式多模態(tài)跨器官醫(yī)學影像基礎模型(MINIM),可基于文本指令以及多器官的多種成像方式,合成海量的高質(zhì)量醫(yī)學影像數(shù)據(jù),為醫(yī)學影像大模型的訓練、精準醫(yī)療及個性化診療等提供有力技術(shù)支持。該成果已于近期在國際權(quán)威期刊《自然·醫(yī)學》上在線發(fā)表。


  醫(yī)學影像大模型是利用深度學習和大規(guī)模數(shù)據(jù)訓練的AI通用模型,可自動分析醫(yī)學影像以輔助診斷和治療規(guī)劃。但要提升大模型的性能,就需要大量數(shù)據(jù)不斷進行訓練。然而,由于患者隱私保護、高昂的數(shù)據(jù)標注成本等多種因素,要獲得高質(zhì)量、多樣化的醫(yī)學影像數(shù)據(jù)往往存在障礙。為此,近年來,研究者們開始探索使用生成式AI技術(shù)合成醫(yī)學影像數(shù)據(jù),以此來擴充數(shù)據(jù)。


  “目前公開的醫(yī)學影像數(shù)據(jù)非常有限,我們建立的生成式模型有望解決訓練數(shù)據(jù)不夠的問題?!北本┐髮W未來技術(shù)學院助理研究員王勁卓說,研究團隊利用多種器官在CT、X光、磁共振等不同成像方式下的高質(zhì)量影像文本配對數(shù)據(jù)進行訓練,最終生成海量的醫(yī)學合成影像,其在圖像特征、細節(jié)呈現(xiàn)等多方面都與真實醫(yī)學圖像高度一致。


  實驗結(jié)果顯示,MINIM生成的合成數(shù)據(jù)在醫(yī)生主觀評測指標和多項客觀檢驗標準方面達國際領先水平,在臨床應用中具有重要參考價值。在真實數(shù)據(jù)基礎上,使用20倍合成數(shù)據(jù)在眼科、胸科、腦科和乳腺科的多個醫(yī)學任務準確率平均可提升12%至17%。


  王勁卓表示,MINIM產(chǎn)生的合成數(shù)據(jù)具有廣泛應用前景,可單獨作為訓練集來構(gòu)建醫(yī)學影像大模型,也可與真實數(shù)據(jù)結(jié)合使用,提高模型在實際任務中的性能,推動AI在醫(yī)學和健康領域更廣泛應用。目前,在疾病診斷、醫(yī)學報告生成和自監(jiān)督學習等關鍵領域,利用MINIM合成數(shù)據(jù)進行訓練已展現(xiàn)出顯著的性能提升。(記者魏夢佳)


  轉(zhuǎn)自:新華每日電訊

  【版權(quán)及免責聲明】凡本網(wǎng)所屬版權(quán)作品,轉(zhuǎn)載時須獲得授權(quán)并注明來源“中國產(chǎn)業(yè)經(jīng)濟信息網(wǎng)”,違者本網(wǎng)將保留追究其相關法律責任的權(quán)力。凡轉(zhuǎn)載文章及企業(yè)宣傳資訊,僅代表作者個人觀點,不代表本網(wǎng)觀點和立場。版權(quán)事宜請聯(lián)系:010-65363056。

延伸閱讀

?

版權(quán)所有:中國產(chǎn)業(yè)經(jīng)濟信息網(wǎng)京ICP備11041399號-2京公網(wǎng)安備11010502035964