4月12日，復(fù)旦大學(xué)附屬中山醫(yī)院發(fā)布一款基于多模態(tài)大模型驅(qū)動的消化內(nèi)鏡全場景智能體“鏡觀”，可為患者解讀胃鏡、腸鏡等內(nèi)鏡報(bào)告，也可輔助醫(yī)生開展內(nèi)鏡下手術(shù)并預(yù)警風(fēng)險。

復(fù)旦大學(xué)附屬中山醫(yī)院消化內(nèi)鏡全場景智能體“鏡觀”，可根據(jù)患者指令，結(jié)合現(xiàn)實(shí)及虛擬影像解讀內(nèi)鏡報(bào)告。 中山醫(yī)院 供圖

當(dāng)天，澎湃新聞記者從復(fù)旦大學(xué)附屬中山醫(yī)院獲悉，“鏡觀”是全球首個深度融合大數(shù)據(jù)、AI技術(shù)與醫(yī)療資源的消化內(nèi)鏡全場景智能體，通過整合超百萬例內(nèi)鏡影像，構(gòu)建消化內(nèi)鏡多模態(tài)基礎(chǔ)模型，并依托國產(chǎn)自主AI芯片實(shí)現(xiàn)醫(yī)院端側(cè)部署，形成“感知-決策-執(zhí)行-進(jìn)化”的智能鏈。

“鏡觀”有多重身份，其第一重身份是患者的私人醫(yī)療顧問，除了一對一解讀胃鏡、腸鏡以及內(nèi)鏡手術(shù)等報(bào)告，為患者答疑解惑之外，還可通過知識圖譜及專病數(shù)據(jù)庫，為患者詳細(xì)解讀相關(guān)疾病，具備醫(yī)療科普功能。

它的第二重身份是醫(yī)生的“手術(shù)智囊伙伴”，醫(yī)生可通過“鏡觀”搭載的眼動和語音交互功能，在手術(shù)中實(shí)時獲取病灶分析。系統(tǒng)能自動生成結(jié)構(gòu)化報(bào)告，再由醫(yī)生查缺補(bǔ)漏和最終確認(rèn)。同時，該系統(tǒng)還搭載了診療規(guī)范庫，能智能預(yù)警操作風(fēng)險。

此外，“鏡觀”可成為輔助醫(yī)院管理決策的“管家”，該系統(tǒng)基于國產(chǎn)AI算力平臺開發(fā)，可在院內(nèi)進(jìn)行數(shù)據(jù)資源整合、分析，實(shí)現(xiàn)科室運(yùn)轉(zhuǎn)的精準(zhǔn)調(diào)控。在安全性方面，它做到了“數(shù)據(jù)不出院”的安全架構(gòu)。

中山醫(yī)院內(nèi)鏡中心在過去近二十年引領(lǐng)國際內(nèi)鏡微創(chuàng)診療發(fā)展。4月3日，在西班牙巴塞羅那舉行的歐洲消化內(nèi)鏡協(xié)會（ESGE）年會上，復(fù)旦大學(xué)附屬中山醫(yī)院內(nèi)鏡中心周平紅教授、蔡明琰副主任醫(yī)師團(tuán)隊(duì)歷經(jīng)7年自主研發(fā)的“一次性使用電圈套切開刀（ALL IN ONE snare probe）”榮獲2025年新器械創(chuàng)新獎（Innovation of the Year 2025 New Device Award）。這是該國際獎項(xiàng)首次授予中國醫(yī)療機(jī)構(gòu)自主研發(fā)的內(nèi)鏡器械。

中山醫(yī)院表示，未來三年，消化內(nèi)鏡全場景智能體“鏡觀”平臺計(jì)劃接入全國300家醫(yī)療機(jī)構(gòu)，培訓(xùn)2000名基層醫(yī)生，通過AI技術(shù)助力醫(yī)療資源均衡化與診療能力普惠化。