4月12日，復旦大學附屬中山醫(yī)院發(fā)布一款基于多模態(tài)大模型驅(qū)動的消化內(nèi)鏡全場景智能體“鏡觀”，可為患者解讀胃鏡、腸鏡等內(nèi)鏡報告，也可輔助醫(yī)生開展內(nèi)鏡下手術并預警風險。

復旦大學附屬中山醫(yī)院消化內(nèi)鏡全場景智能體“鏡觀”，可根據(jù)患者指令，結(jié)合現(xiàn)實及虛擬影像解讀內(nèi)鏡報告。 中山醫(yī)院 供圖

當天，澎湃新聞記者從復旦大學附屬中山醫(yī)院獲悉，“鏡觀”是全球首個深度融合大數(shù)據(jù)、AI技術與醫(yī)療資源的消化內(nèi)鏡全場景智能體，通過整合超百萬例內(nèi)鏡影像，構(gòu)建消化內(nèi)鏡多模態(tài)基礎模型，并依托國產(chǎn)自主AI芯片實現(xiàn)醫(yī)院端側(cè)部署，形成“感知-決策-執(zhí)行-進化”的智能鏈。

“鏡觀”有多重身份，其第一重身份是患者的私人醫(yī)療顧問，除了一對一解讀胃鏡、腸鏡以及內(nèi)鏡手術等報告，為患者答疑解惑之外，還可通過知識圖譜及專病數(shù)據(jù)庫，為患者詳細解讀相關疾病，具備醫(yī)療科普功能。

它的第二重身份是醫(yī)生的“手術智囊伙伴”，醫(yī)生可通過“鏡觀”搭載的眼動和語音交互功能，在手術中實時獲取病灶分析。系統(tǒng)能自動生成結(jié)構(gòu)化報告，再由醫(yī)生查缺補漏和最終確認。同時，該系統(tǒng)還搭載了診療規(guī)范庫，能智能預警操作風險。

此外，“鏡觀”可成為輔助醫(yī)院管理決策的“管家”，該系統(tǒng)基于國產(chǎn)AI算力平臺開發(fā)，可在院內(nèi)進行數(shù)據(jù)資源整合、分析，實現(xiàn)科室運轉(zhuǎn)的精準調(diào)控。在安全性方面，它做到了“數(shù)據(jù)不出院”的安全架構(gòu)。

中山醫(yī)院內(nèi)鏡中心在過去近二十年引領國際內(nèi)鏡微創(chuàng)診療發(fā)展。4月3日，在西班牙巴塞羅那舉行的歐洲消化內(nèi)鏡協(xié)會（ESGE）年會上，復旦大學附屬中山醫(yī)院內(nèi)鏡中心周平紅教授、蔡明琰副主任醫(yī)師團隊歷經(jīng)7年自主研發(fā)的“一次性使用電圈套切開刀（ALL IN ONE snare probe）”榮獲2025年新器械創(chuàng)新獎（Innovation of the Year 2025 New Device Award）。這是該國際獎項首次授予中國醫(yī)療機構(gòu)自主研發(fā)的內(nèi)鏡器械。

中山醫(yī)院表示，未來三年，消化內(nèi)鏡全場景智能體“鏡觀”平臺計劃接入全國300家醫(yī)療機構(gòu)，培訓2000名基層醫(yī)生，通過AI技術助力醫(yī)療資源均衡化與診療能力普惠化。