科研動態(tài)
北京天壇醫(yī)院和北京理工大學(xué)團隊合作創(chuàng)建醫(yī)學(xué)影像大模型 首位中文數(shù)字放射科醫(yī)生誕生
首都醫(yī)科大學(xué)附屬北京天壇醫(yī)院放射科劉亞歐教授團隊聯(lián)合北京理工大學(xué)葉初陽教授、張美慧教授團隊近日合作推出首個專為醫(yī)學(xué)影像診斷而設(shè)計和構(gòu)建的人工智能大語言模型(LLM)——“龍影”大模型(RadGPT),基于該模型研發(fā)的首個“中文數(shù)字放射科醫(yī)生”“小君”已經(jīng)實現(xiàn)通過分析MRI圖像描述快速生成超過百種疾病的診斷意見,平均生成一個病例的診斷意見僅需0.8秒。
劉亞歐介紹,目前“小君”醫(yī)生可以實現(xiàn)針對腦血管病以及腦部、頸部和胸部等十幾個部位的腫瘤、感染類疾病等上百種疾病給出診斷意見,經(jīng)過近千例病例驗證,準(zhǔn)確率超過95%。“通過對MRI圖像的描述快速生成診斷意見只是‘小君’初步掌握的技能,下一步我們要繼續(xù)訓(xùn)練‘小君’掌握對CT和X線影像的報告解析和診斷,并且進一步通過圖像生成影像診斷,通過不斷學(xué)習(xí)和迭代,讓‘小君’成為一名真正的放射科醫(yī)生。”劉亞歐說。
“龍影”大模型的建立,是基于北京天壇醫(yī)院放射科超過百萬的優(yōu)質(zhì)醫(yī)學(xué)影像圖像數(shù)據(jù),以及數(shù)十年積累的專業(yè)影像診斷經(jīng)驗,并由多名資深人工智能專家進行超過三年的訓(xùn)練。北京理工大學(xué)張美慧和葉初陽介紹,“龍影”基于中文自然語言處理的大語言模型,有針對性地采用多種大模型微調(diào)方法,在保護醫(yī)療數(shù)據(jù)隱私性的同時,高效地提升了模型在垂直領(lǐng)域內(nèi)特定下游任務(wù)上的性能表現(xiàn)。
研究團隊表示,“小君”可以實現(xiàn)“7X24小時”不間斷工作,確保患者的影像診斷需求可以得到及時處理,并緩解放射科醫(yī)生的診斷壓力,提升診斷的效率和準(zhǔn)確性。同時,隨著功能的不斷豐富和完善,依據(jù)不同地區(qū)、語言特點、診斷習(xí)慣等,“龍影”可以訓(xùn)練能夠適應(yīng)不同診療特色和區(qū)域特色的數(shù)字放射醫(yī)生,特別是對于醫(yī)療條件尚不完善的地區(qū),同樣可以獲得北京天壇醫(yī)院專家級別的影像診斷,改善醫(yī)療服務(wù)水平。
“‘龍影’和‘小君’是大語言模型應(yīng)用于醫(yī)學(xué)影像領(lǐng)域的一個突破,我們希望隨著大模型的不斷改進升級,能夠更好地賦能放射科醫(yī)生,為患者帶來更優(yōu)質(zhì)的醫(yī)療服務(wù)。”劉亞歐說。