7月5日,2024世界人工智能大會上,支付寶公布了AI技術(shù)在醫(yī)療領(lǐng)域布局的最新進(jìn)展,并發(fā)布了多模態(tài)醫(yī)療大模型。同時推出醫(yī)療可信一體機(jī)、可信云等多款數(shù)智化解決方案。同時,在大會現(xiàn)場,支付寶、人民衛(wèi)生出版社、北京大學(xué)醫(yī)學(xué)部、浙江省衛(wèi)生健康委等20多家機(jī)構(gòu)和企業(yè)聯(lián)合發(fā)起了AI醫(yī)療共建計劃,共同探索大模型應(yīng)用及各類??颇P偷膭?chuàng)新研發(fā)。

經(jīng)過半年多測試打磨,支付寶醫(yī)療大模型在本次大會上正式亮相,這是國內(nèi)首批多模態(tài)醫(yī)療大模型之一。螞蟻集團(tuán)大模型應(yīng)用部總經(jīng)理顧進(jìn)杰介紹:螞蟻百靈大模型已具備能“看”會“聽”、能“說”會“畫”的原生多模態(tài)能力,可以直接理解并訓(xùn)練音頻、視頻、圖、文等多模態(tài)數(shù)據(jù)。
支付寶醫(yī)療大模型是以此為基座模型,添加了包含報告、影像、藥品等百億級中英文圖文、千億級醫(yī)療文本語料及千萬級高質(zhì)量醫(yī)療知識圖譜,中英文醫(yī)療考試、基準(zhǔn)測試達(dá)到或超過GPT4水準(zhǔn)。同時,為讓回答對話更加可靠,在研發(fā)階段,支付寶還與數(shù)百個專業(yè)醫(yī)學(xué)團(tuán)隊、專家進(jìn)行合作標(biāo)注數(shù)據(jù),保障信息權(quán)威可信,同時聯(lián)合上海仁濟(jì)醫(yī)院推出首個中文醫(yī)療專科問答推理數(shù)據(jù)集RJUA-QA。模型測試階段,用戶、患者、醫(yī)生參與問答反饋,在專業(yè)同時,兼顧患者關(guān)懷。目前,該多模態(tài)醫(yī)療大模型不僅提供智能問答、病歷結(jié)構(gòu)化和檢索、輔助診斷,還可識別解讀藥品及上百種復(fù)雜的醫(yī)學(xué)報告,進(jìn)行毛發(fā)健康檢測等,這些都能嵌入醫(yī)院等機(jī)構(gòu)醫(yī)療環(huán)節(jié)全流程,創(chuàng)新醫(yī)療服務(wù)的同時,也助力提升機(jī)構(gòu)運營效率。顧進(jìn)杰表示:
AI的深度應(yīng)用,不僅對數(shù)據(jù)、算法、算力提出了更高要求,也對可靠、安全、隱私提出更多挑戰(zhàn),醫(yī)療場景下,保障技術(shù)可靠與數(shù)據(jù)隱私安全,至關(guān)重要。為此,支付寶面向行業(yè)推出全新的“醫(yī)療可信一體機(jī)+可信云”的解決方案,通過密態(tài)計算與存儲,讓醫(yī)療數(shù)據(jù)可用不可見,機(jī)構(gòu)保管更安全。
自去年以來,支付寶就加速了AI技術(shù)在醫(yī)療領(lǐng)域的開放與布局。去年11月,浙江衛(wèi)健委應(yīng)用支付寶開放的“AI就醫(yī)助理”解決方案,依托大模型、數(shù)字人技術(shù),打造了全國首個數(shù)字健康人“安診兒”,給浙江居民提供云陪診、健康咨詢等服務(wù),上線以來,服務(wù)了1000多家醫(yī)療機(jī)構(gòu)。上海市第一人民醫(yī)院,應(yīng)用AI大模型,不僅上線了上海首個可語音交互的“數(shù)字陪診師”,還在業(yè)內(nèi)首創(chuàng)了生成式電子病歷,將繁雜的文書工作從原本的10分鐘縮減到了15秒。支付寶副總裁、數(shù)字醫(yī)療健康事業(yè)部總經(jīng)理張俊杰表示:
支付寶希望用最頂尖的技術(shù)做最普惠的服務(wù),讓AI像‘掃碼支付’一樣便利每個人的生活。支付寶也會持續(xù)開放AI技術(shù)與行業(yè)解決方案,攜手合作伙伴一起,推動智能醫(yī)療走向普惠、普及。