AI醫(yī)療新紀(jì)元：復(fù)旦王爍研究員引領(lǐng)多模態(tài)醫(yī)學(xué)人工智能技術(shù)革新

原創(chuàng) 贊收藏 評(píng)論

舉報(bào) 2025-01-10

掃描,分享朋友圈

在人工智能與醫(yī)療健康深度融合的今天,AI技術(shù)正以前所未有的速度推動(dòng)著醫(yī)療行業(yè)的革新與進(jìn)步。AI醫(yī)療不僅提高了醫(yī)療服務(wù)的精準(zhǔn)性和效率,更為患者帶來(lái)了更加便捷、高效的診療體驗(yàn)。

王爍是復(fù)旦大學(xué)數(shù)字醫(yī)學(xué)研究中心的青年研究員,因其在AI+醫(yī)療領(lǐng)域的探索和成果,以“基于飛槳平臺(tái)的大規(guī)模人群心臟數(shù)字孿生研究”課題獲得2023年CCF-百度松果基金(以下簡(jiǎn)稱“松果基金”)的支持。

松果基金于2020年由百度與中國(guó)計(jì)算機(jī)學(xué)會(huì)(CCF)共同發(fā)起,是目前國(guó)內(nèi)唯一基于中國(guó)首個(gè)自主研發(fā)、開(kāi)源開(kāi)放、功能豐富的產(chǎn)業(yè)級(jí)深度學(xué)習(xí)平臺(tái)飛槳和產(chǎn)業(yè)級(jí)知識(shí)增強(qiáng)大模型文心大模型設(shè)立的科研基金。通過(guò)為期一年的課題項(xiàng)目,基金為青年學(xué)者提供數(shù)百萬(wàn)課題基金,以及價(jià)值千萬(wàn)的平臺(tái)、數(shù)據(jù)、技術(shù)等多維度支持,全球 AI 創(chuàng)新人才搭建產(chǎn)教融合及學(xué)術(shù)交流的平臺(tái)。

在松果基金的支持下,王爍開(kāi)展了一系列面向臨床診療的多模態(tài)醫(yī)學(xué)人工智能(AI for Multi-Modal Medicine, AIM3)工作?；诙嗄B(tài)醫(yī)學(xué)大數(shù)據(jù),結(jié)合生成式人工智能(Generative AI)和科學(xué)智能(AI for Science,AI4S),實(shí)現(xiàn)了大規(guī)模人群的心臟數(shù)字孿生,為心臟疾病的早期發(fā)現(xiàn)和精準(zhǔn)治療提供有力工具。

與此同時(shí),為提高全社會(huì)對(duì)于新生兒先天性耳畸形這一疾病的重視,王爍利用百度文心大模型強(qiáng)大的自然語(yǔ)言處理和跨模態(tài)信息分析的能力,與復(fù)旦大學(xué)附屬眼耳鼻喉科醫(yī)院整形外科張?zhí)煊睢⒏雕厚褐魅螆F(tuán)隊(duì)合作,訓(xùn)練新生兒耳畸形識(shí)別模型,研發(fā)新生兒耳畸形鑒別與科普問(wèn)答插件——Fdear。用戶通過(guò)上傳新生兒耳朵圖片至Fdear,即可得到耳畸形鑒別結(jié)果。Fdear既能精準(zhǔn)判斷耳朵是否存在畸形,還能初步判斷屬于哪種畸形。

圖片1.jpg

王爍研究員在2024文心大模型生態(tài)大會(huì)報(bào)告

除此之外,對(duì)于耳畸形的治療,Fdear提供基于大模型的互動(dòng)式問(wèn)答科普,給出關(guān)于治療期、手術(shù)期的一系列注意事項(xiàng)。該插件不但為需要初步自查的用戶提供了便利,將來(lái)也可以作為衛(wèi)生課的教學(xué)工具、兒童保健的科普工具等。

圖片2.jpg

王爍研究員在科研工作中

復(fù)旦大學(xué)數(shù)字醫(yī)學(xué)研究中心與百度的深度合作,是對(duì)AI在醫(yī)療領(lǐng)域應(yīng)用的一次大膽且富有成效的嘗試。事實(shí)上,松果基金成立5年以來(lái),已經(jīng)支持了眾多像王爍這樣的青年科學(xué)家。他們?cè)诟髯缘难芯款I(lǐng)域內(nèi)取得了實(shí)質(zhì)性進(jìn)展。相信在未來(lái),隨著更多青年科研人才的崛起和科研成果的轉(zhuǎn)化應(yīng)用,AI醫(yī)療技術(shù)將在更多領(lǐng)域發(fā)揮重要作用。松果基金將繼續(xù)發(fā)揮其獨(dú)特作用,為青年學(xué)者提供更多元化的支持和幫助,助力他們?cè)贏I領(lǐng)域取得更大的科研成果。

本文系作者授權(quán)數(shù)英發(fā)表，內(nèi)容為作者獨(dú)立觀點(diǎn)，不代表數(shù)英立場(chǎng)。
轉(zhuǎn)載請(qǐng)?jiān)谖恼麻_(kāi)頭和結(jié)尾顯眼處標(biāo)注：作者、出處和鏈接。不按規(guī)范轉(zhuǎn)載侵權(quán)必究。