AI醫(yī)療新紀(jì)元：復(fù)旦王爍研究員引領(lǐng)多模態(tài)醫(yī)學(xué)人工智能技術(shù)革新

　　在人工智能與醫(yī)療健康深度融合的今天,AI技術(shù)正以前所未有的速度推動著醫(yī)療行業(yè)的革新與進(jìn)步。AI醫(yī)療不僅提高了醫(yī)療服務(wù)的精準(zhǔn)性和效率,更為患者帶來了更加便捷、高效的診療體驗(yàn)。

　　王爍是復(fù)旦大學(xué)數(shù)字醫(yī)學(xué)研究中心的青年研究員,因其在AI+醫(yī)療領(lǐng)域的探索和成果,以“基于飛槳平臺的大規(guī)模人群心臟數(shù)字孿生研究”課題獲得2023年CCF-百度松果基金(以下簡稱“松果基金”)的支持。

　　松果基金于2020年由百度與中國計(jì)算機(jī)學(xué)會(CCF)共同發(fā)起,是目前國內(nèi)唯一基于中國首個自主研發(fā)、開源開放、功能豐富的產(chǎn)業(yè)級深度學(xué)習(xí)平臺飛槳和產(chǎn)業(yè)級知識增強(qiáng)大模型文心大模型設(shè)立的科研基金。通過為期一年的課題項(xiàng)目,基金為青年學(xué)者提供數(shù)百萬課題基金,以及價(jià)值千萬的平臺、數(shù)據(jù)、技術(shù)等多維度支持,全球 AI 創(chuàng)新人才搭建產(chǎn)教融合及學(xué)術(shù)交流的平臺。

　　在松果基金的支持下,王爍開展了一系列面向臨床診療的多模態(tài)醫(yī)學(xué)人工智能(AI for Multi-Modal Medicine, AIM3)工作�；�于多模態(tài)醫(yī)學(xué)大數(shù)據(jù),結(jié)合生成式人工智能(Generative AI)和科學(xué)智能(AI for Science,AI4S),實(shí)現(xiàn)了大規(guī)模人群的心臟數(shù)字孿生,為心臟疾病的早期發(fā)現(xiàn)和精準(zhǔn)治療提供有力工具。

　　與此同時(shí),為提高全社會對于新生兒先天性耳畸形這一疾病的重視,王爍利用百度文心大模型強(qiáng)大的自然語言處理和跨模態(tài)信息分析的能力,與復(fù)旦大學(xué)附屬眼耳鼻喉科醫(yī)院整形外科張?zhí)煊�、傅窈窈主任團(tuán)隊(duì)合作,訓(xùn)練新生兒耳畸形識別模型,研發(fā)新生兒耳畸形鑒別與科普問答插件——Fdear。用戶通過上傳新生兒耳朵圖片至Fdear,即可得到耳畸形鑒別結(jié)果。Fdear既能精準(zhǔn)判斷耳朵是否存在畸形,還能初步判斷屬于哪種畸形。

　　王爍研究員在2024文心大模型生態(tài)大會報(bào)告

　　除此之外,對于耳畸形的治療,Fdear提供基于大模型的互動式問答科普,給出關(guān)于治療期、手術(shù)期的一系列注意事項(xiàng)。該插件不但為需要初步自查的用戶提供了便利,將來也可以作為衛(wèi)生課的教學(xué)工具、兒童保健的科普工具等。

　　王爍研究員在科研工作中

　　復(fù)旦大學(xué)數(shù)字醫(yī)學(xué)研究中心與百度的深度合作,是對AI在醫(yī)療領(lǐng)域應(yīng)用的一次大膽且富有成效的嘗試。事實(shí)上,松果基金成立5年以來,已經(jīng)支持了眾多像王爍這樣的青年科學(xué)家。他們在各自的研究領(lǐng)域內(nèi)取得了實(shí)質(zhì)性進(jìn)展。相信在未來,隨著更多青年科研人才的崛起和科研成果的轉(zhuǎn)化應(yīng)用,AI醫(yī)療技術(shù)將在更多領(lǐng)域發(fā)揮重要作用。松果基金將繼續(xù)發(fā)揮其獨(dú)特作用,為青年學(xué)者提供更多元化的支持和幫助,助力他們在AI領(lǐng)域取得更大的科研成果。