在醫(yī)療領(lǐng)域，如何利用大模型為醫(yī)生提供疾病診療的新工具、新方法，以改善疾病診斷、治療和預(yù)防，同樣是業(yè)內(nèi)人士迫切關(guān)注的課題。2023世界人工智能大會(huì)（WAIC）期間，商湯科技展示了融入醫(yī)療大模型的升級(jí)版“SenseCare®智慧醫(yī)院”綜合解決方案，利用覆蓋多模態(tài)的醫(yī)療基礎(chǔ)模型群，賦能醫(yī)院的就醫(yī)、診療、隨訪等環(huán)節(jié)，并有效助力醫(yī)療長(zhǎng)尾問(wèn)題的解決�；谏虦笱b置的強(qiáng)大算力支持，商湯科技能夠?yàn)獒t(yī)療機(jī)構(gòu)提供將大模型“為己所用”的能力，幫助醫(yī)療機(jī)構(gòu)在解決疑難病癥的同時(shí)實(shí)現(xiàn)降本增效。
WAIC期間商湯科技展示了大模型在醫(yī)療領(lǐng)域的多個(gè)落地應(yīng)用案例
臨床問(wèn)題紛雜難覆蓋？多模態(tài)醫(yī)療基礎(chǔ)模型群來(lái)“破局”
《中國(guó)人工智能大模型地圖研究報(bào)告》顯示，中國(guó)自2020年起進(jìn)入大模型快速發(fā)展期，一批通用類大模型正快速發(fā)展。據(jù)不完全統(tǒng)計(jì)，截至目前，中國(guó)10億級(jí)參數(shù)規(guī)模以上大模型已發(fā)布79個(gè)，相關(guān)應(yīng)用行業(yè)正從辦公、生活、娛樂(lè)等方向，向醫(yī)療、工業(yè)、教育等領(lǐng)域快速拓展。
在商湯科技“大愛(ài)無(wú)疆·日日新”人工智能論壇上，美國(guó)羅格斯大學(xué)計(jì)算機(jī)系特聘教授Dimitris N.Metaxas指出，隨著大模型浪潮的到來(lái)，醫(yī)療基模型在解決醫(yī)療多模態(tài)數(shù)據(jù)分析及臨床長(zhǎng)尾問(wèn)題方面已展現(xiàn)出不俗的能力，例如在一些數(shù)據(jù)較少的臨床場(chǎng)景，大模型可帶來(lái)顯著人工智能效果提升。未來(lái)，生成式和多模態(tài)大模型也將持續(xù)為醫(yī)療行業(yè)帶來(lái)創(chuàng)新動(dòng)力。
Dimitris N.Metaxas教授在論壇上針對(duì)大模型賦能醫(yī)療做精彩分享
不過(guò)，相較其他領(lǐng)域，大模型在醫(yī)療領(lǐng)域的落地面臨著更復(fù)雜的挑戰(zhàn)。一方面，不同模態(tài)的醫(yī)療數(shù)據(jù)之間，成像模式、圖像特征都有較大差異，且醫(yī)療臨床長(zhǎng)尾問(wèn)題紛繁復(fù)雜；另一方面，醫(yī)療數(shù)據(jù)私密性要求極高，滿足醫(yī)療機(jī)構(gòu)本地環(huán)境部署要求也是大模型落地的重要考量因素。因此，行業(yè)發(fā)展亟需適應(yīng)不同臨床問(wèn)題、且能滿足臨床部署要求的醫(yī)療專業(yè)大模型。
在這一背景下，商湯科技與行業(yè)伙伴合作，推出了醫(yī)療語(yǔ)言大模型、醫(yī)療影像大模型、生信大模型等多種垂類基礎(chǔ)模型群，覆蓋CT、MRI、超聲、內(nèi)鏡、病理、醫(yī)學(xué)文本、生信數(shù)據(jù)等不同醫(yī)療數(shù)據(jù)模態(tài)。
大模型訓(xùn)練，離不開強(qiáng)大的算力支持，商湯大裝置SenseCore擁有5000 Petaflops算力，支持20個(gè)千億參數(shù)超大模型同時(shí)訓(xùn)練，為大模型的創(chuàng)新和應(yīng)用效率大大提速。借助商湯大裝置的超大算力和醫(yī)療基礎(chǔ)模型群的堅(jiān)實(shí)基礎(chǔ)，商湯能夠化身“醫(yī)療大模型工廠”，基于醫(yī)療機(jī)構(gòu)的特定需求，幫助其針對(duì)下游臨床長(zhǎng)尾問(wèn)題高效訓(xùn)練模型，甚至輔助機(jī)構(gòu)實(shí)現(xiàn)模型自主訓(xùn)練。“該模式突破了醫(yī)療長(zhǎng)尾問(wèn)題數(shù)據(jù)樣本少、標(biāo)注難度高的瓶頸，實(shí)現(xiàn)了針對(duì)不同任務(wù)的小數(shù)據(jù)、弱標(biāo)注、高效率的訓(xùn)練，同時(shí)顯著降低了大模型部署成本，滿足不同醫(yī)療機(jī)構(gòu)個(gè)性化、多樣化的臨床診療需求。”商湯科技副總裁、智慧醫(yī)療業(yè)務(wù)負(fù)責(zé)人張少霆表示，該模式兼顧了大模型性能與落地便捷度之間的平衡，幫助醫(yī)療機(jī)構(gòu)在解決疑難病癥的同時(shí)實(shí)現(xiàn)降本增效。
商湯借助大裝置超大算力和大模型堅(jiān)實(shí)基礎(chǔ)，全方位賦能臨床診療
目前，商湯科技已將醫(yī)療基礎(chǔ)模型群融入“SenseCare®智慧醫(yī)院”綜合解決方案，更好地助力醫(yī)院高質(zhì)量發(fā)展。
發(fā)揮縱深優(yōu)勢(shì)，商湯大模型實(shí)現(xiàn)多醫(yī)療場(chǎng)景落地
產(chǎn)業(yè)應(yīng)用場(chǎng)景已成為大模型的最佳“練兵場(chǎng)”，垂類大模型將進(jìn)一步發(fā)揮縱深優(yōu)勢(shì)，助推產(chǎn)業(yè)界的快速發(fā)展。商湯科技積極探索大模型在醫(yī)療領(lǐng)域的落地，并于WAIC期間，發(fā)布了融入醫(yī)療大模型的升級(jí)版“SenseCare®智慧醫(yī)院”綜合解決方案，覆蓋智慧就醫(yī)、智慧診療、智慧醫(yī)院管理、智慧醫(yī)學(xué)科研、智慧醫(yī)療云五大場(chǎng)景，打造五位一體全方位產(chǎn)品矩陣。目前該解決方案已落地全國(guó)多家頭部三甲醫(yī)院，用更多元化的AI服務(wù)，賦能醫(yī)院診療、科研、決策等各個(gè)層面，助力醫(yī)院智慧化轉(zhuǎn)型升級(jí)。
鄭州大學(xué)第一附屬醫(yī)院承擔(dān)建設(shè)了國(guó)家遠(yuǎn)程醫(yī)療中心，打造了國(guó)內(nèi)領(lǐng)先、國(guó)際先進(jìn)的“國(guó)際-國(guó)家-省-市-縣-鄉(xiāng)-村”七級(jí)聯(lián)動(dòng)的遠(yuǎn)程醫(yī)療服務(wù)體系。商湯科技運(yùn)用醫(yī)療大模型及扎實(shí)的智慧醫(yī)療云平臺(tái)建設(shè)能力，助力鄭州大學(xué)第一附屬醫(yī)院構(gòu)建了一體化多模態(tài)綜合服務(wù)平臺(tái)，創(chuàng)新河南省全域遠(yuǎn)程醫(yī)療健康服務(wù)模式。
在具體應(yīng)用層面，在醫(yī)療大模型的賦能下，鄭州大學(xué)第一附屬醫(yī)院打造影像、病理、心電三大智能遠(yuǎn)程診斷平臺(tái)，響應(yīng)基層醫(yī)院需求，借助大模型輔助地區(qū)特色病、疑難病的診療，有效推動(dòng)醫(yī)療長(zhǎng)尾問(wèn)題的解決。此外，基于海量藥學(xué)知識(shí)和專家經(jīng)驗(yàn)，醫(yī)院與商湯科技合作，研發(fā)了行業(yè)前沿的用藥咨詢語(yǔ)言大模型，將為患者提供更智慧便捷高效的線上用藥咨詢服務(wù)和體驗(yàn)。鄭州大學(xué)第一附屬醫(yī)院黨委副書記、副院長(zhǎng)趙杰指出，隨著人工智能等各種新型技術(shù)的發(fā)展，未來(lái)遠(yuǎn)程醫(yī)療在服務(wù)內(nèi)容、服務(wù)方式、服務(wù)應(yīng)用和服務(wù)管理等方面都將得到全方位提升。
商湯科技展示大模型賦能下的遠(yuǎn)程醫(yī)療服務(wù)平臺(tái)案例
商湯科技助力瑞金醫(yī)院建設(shè)的全院智慧影像云平臺(tái)，覆蓋包括影像數(shù)據(jù)互聯(lián)互通、移動(dòng)閱片、5G+遠(yuǎn)程會(huì)診、AI智能診療、患者云影像健康檔案等多種功能。在精準(zhǔn)診療方面，在多模態(tài)醫(yī)療基礎(chǔ)模型的輔助下，商湯科技助力瑞金醫(yī)院實(shí)現(xiàn)了全身多部位多器官的AI輔助診療，為瑞金醫(yī)院多個(gè)院區(qū)、不同臨床科室提供滿足診、療、愈全流程的智能化服務(wù)，有效地提高醫(yī)生的診療效率和精度。接下來(lái)，商湯將探索醫(yī)療大模型在更多醫(yī)療場(chǎng)景的落地，為更多科室賦能，優(yōu)化醫(yī)生的診療效果，提升患者就醫(yī)體驗(yàn)。
商湯助力瑞金醫(yī)院建設(shè)的全院智慧影像云平臺(tái)亮相WAIC
針對(duì)就醫(yī)環(huán)節(jié)，商談科技基于醫(yī)療語(yǔ)言大模型“大醫(yī)”打造的智慧就醫(yī)平臺(tái)，可提供智能導(dǎo)診、智能預(yù)問(wèn)診、診前檢驗(yàn)、智能隨訪、院內(nèi)導(dǎo)航等多種功能，實(shí)現(xiàn)了診前、診中、診后多個(gè)環(huán)節(jié)的數(shù)字化升級(jí)，重塑患者就診流程，實(shí)現(xiàn)門診環(huán)節(jié)全流程智能化，縮短患者在院停留時(shí)間，優(yōu)化患者就醫(yī)體驗(yàn)。
“智能陪診助手”可提供智能導(dǎo)診、院內(nèi)導(dǎo)航等功能
未來(lái)，商湯科技將進(jìn)一步聚焦不同醫(yī)療機(jī)構(gòu)的需求場(chǎng)景，基于醫(yī)療基礎(chǔ)模型群進(jìn)一步擴(kuò)容“醫(yī)療大模型工廠”，為客戶提供更多臨床功能、更多創(chuàng)新服務(wù)形式如MaaS（Model-as-a-Service）的一站式臨床解決方案，更好地助力醫(yī)院智慧化轉(zhuǎn)型及高質(zhì)量發(fā)展，助力普惠醫(yī)療的實(shí)現(xiàn)。