“首批已有6家醫院參與智慧醫院示範樣板建設中。”
作者：蘇打
編輯：tuya
公司情報專家《財經塗鴉》獲悉，2024世界人工智能大會（WAIC）期間，商湯醫療宣佈攜手六家醫院，在行業內率先啓動醫療多模態大模型賦能的智慧醫院創新示範共創。
距了解，本次參與醫院括瑞金醫院、華西醫院、新華醫院、西京醫院、中科大附屬第一醫院和北京清華長庚醫院，共同作爲打造由大模型“智慧中樞”驅動的智慧醫院建設示範樣板。
商湯科技副總裁張少霆表示，2.0時代的醫療人工智能主要集中在“單點應用”上，尚未實現整體‘一盤棋’佈局。“在3.0時代，我們希望利用醫療大模型幫助醫院建立一個‘中樞大腦’，實現對智慧醫院建設的底層賦能。”
在提升醫療大模型綜合分析多模態數據能力方面，商湯醫療已與上述6家醫院達成合作，各方將以商湯醫療大語言模型“大醫”作爲智慧醫院建設“中樞大腦”，智能調度覆蓋醫學文本、放射影像、病理圖像等多種數據模態的專用模型，輔助醫生完成跨科室、跨模態的複雜診斷推理。
在構建多模態能力過程中，張少霆進一步表示，“通才”模型方面，“大醫”的基座模型“商量”已實現語言理解和交互能力全面升級，此前在中文大模型測評基準SuperCLUE中刷新了國內最好成績，成爲首個超越GPT-4 Turbo的國產大模型。得益於此，“大醫”的邏輯推理和智能問答等“通才”能力再度實現飛躍。
與此同時，“專才”模型研發方面，商湯醫療已推出一系列精通不同模態醫學圖像分析的領域專用模型，通過“通專融合”的路徑打造“醫療多模態智能體”，高效助力智慧醫院建設“一盤棋”佈局，幫助醫院實現多場景全方位智能升級。
作爲醫療多模態大模型聯合共創的首批成果之一，WAIC期間，商湯醫療聯合中華醫學會病理學分會王哲副主委團隊、清華大學何永紅教授團隊，共同發佈了國內首個病理大模型PathOrchestra。
該大模型利用國內規模最大的近30萬張全切片數字病理圖像（近300TB數據）數據集訓練，並融合了文本、視頻等多模態訓練數據。通過對海量數據的自監督學習，無需大量精標註數據，即可讓模型“觸類旁通”學會分析各類器官病理圖像，已覆蓋肺、乳腺、肝臟、食管等20餘種器官，賦能包括泛癌分類、病竈識別和檢測、多癌種亞型分類、生物標誌物評估等在內的百餘項臨床任務，已在多器官泛癌分類、淋巴瘤亞型診斷、膀胱癌篩查等近50項任務中準確率超過95%，這也是目前全球賦能臨床任務最廣的病理大模型。
中華醫學會病理學分會副主任委員、中國醫師協會病理醫師分會副會長王哲表示，PathOrchestra是一首由視覺模型、大語言模型以及多模態數據共同奏響的協奏曲，“希望這首協奏曲能夠奏出美好的曲調，爲中國乃至世界的廣大患者的病理診斷做出更好的服務。”
據悉，爲推動大模型技術在病理診斷中的應用，商湯醫療已打造大模型驅動的數智化病理科整體解決方案，串聯切片數字化掃描、高性能閱片、AI智能輔助診斷、數據存儲等病理智慧化診斷全流程，在病理大模型賦能下可支持百餘種臨床輔助診斷任務，還可適配衆多品牌掃描儀及存儲設備，實現千人併發秒級無卡頓調閱，滿足多院區病理智能分析需求，開啓大模型賦能下的病理診斷“新篇章”。