支付寶的醫療大模型亮相了!在中英文考試中，它的表現超越了GPT-4，已經在江浙滬一線醫院落地。

這款醫療大模型不僅在中英文醫療考試、基準測試中超過了GPT-4的水平，還在中文醫療LLM評測榜單promptCBLUE中取得了A榜第一、B榜第二的好成績。更令人驚訝的是，它在識別報告、藥品、毛髮等圖像方面的準確率達到了90%以上。

在WAIC現場，支付寶聯合人民衛生出版社、北京大學醫學部、浙江省衛生健康委等20家機構，共同發起了AI醫療共建計劃。

image.png

支付寶的醫療大模型與其他領域的大模型不同，它在多模態、安全性和專業性方面提出了更高的要求。它基於百靈大模型，具備看、聽、說、畫的原生多模態能力，能夠直接理解並訓練音頻、視頻、圖、文等多模態數據。在此基礎上，模型還添加了包含報告、影像、藥品等百億級中英文圖文、千億級醫療文本語料及千萬級高質量醫療知識圖譜。

目前，這款多模態醫療大模型不僅能提供智能問答、病歷結構化和檢索、輔助診斷，還能識別藥品以及上百種醫學報告，進行毛髮健康檢測等。這些能力可以直接嵌入醫院等機構的醫療環節，快速應用。

在研發階段，支付寶與數百個專業醫學團隊和專家合作標註數據，保障信息的權威性和可信度。同時，聯合上海仁濟醫院推出了首箇中文醫療專科問答推理數據集RJUA-QA。在模型測試階段，用戶、患者、醫生參與問答反饋，確保模型的實用性和準確性。

在安全性方面，支付寶採取了多項措施保障技術可靠和數據隱私安全。螞蟻本身在安全領域有多年的深耕，此次更是面向行業推出了“醫療可信一體機+可信雲”的解決方案，實現訓推一體和國產算力軟硬件協同優化加速，解決醫院算力不足的問題;通過公有云和私有云部署密態推理，解決數據隱私安全方面的問題。

在這款大模型的基礎上，支付寶還發布了全模態數字人、智能體相關產品以及行業解決方案。實際上，支付寶早在去年就已經開始了AI在醫療場景方面的佈局。去年11月，浙江衛健委應用支付寶開放的“AI就醫助理”解決方案，打造了全國首個數字健康人“安診兒”，爲浙江居民提供雲陪診、健康諮詢等服務。

更早之前，支付寶在2014年就支持了全國第一筆遠程掛號繳費。經過十年的發展，平臺已服務超6億看病就醫人羣，成爲國內規模最大的醫保第三方在線服務平臺和一站式的醫療健康服務平臺。全國300多個城市、超3600家醫院在支付寶上提供一站式數字醫療服務。

醫療作爲螞蟻落地三大核心應用領域之一，自然備受關注。螞蟻大模型落地的三大領域是醫療、金融和生活，表現形態爲專業智能體:AI就醫助理、AI金融助理和支付寶智能助理。

在WAIC上，支付寶智能助理首次亮相，併入選今年的鎮館之寶。在支付寶首頁往下拉就能喚醒它，通過對話完成辦事、問診、打車等服務，隨時調用上千個小程序。例如，想點一杯星巴克的中杯冰拿鐵，只需下達指令，AI便會自動下單，用戶確認並付款後就能到附近的線下門店取到咖啡。

螞蟻集團董事長兼CEO井賢棟表示，專業智能體是大模型落地嚴謹產業的有效路徑。智能認知決策技術與平臺是支撐三大智能體的關鍵技術，也獲得了本次大會的重要獎項“卓越人工智能獎（SAIL）TOP30”。這項技術由螞蟻集團和浙江大學歷時七年聯合攻關，大幅提升了人工智能服務嚴謹產業的專業能力、準確性和自我學習能力，讓AI和大模型的決策更聰明、更可靠。

截至目前，項目技術已廣泛應用於醫療民生、金融、政務等行業，服務了上海仁濟醫院、上海市一醫院、浙江省衛健委等2600餘家醫院和機構，人保健康、浦發銀行等數十家金融機構，推動了人工智能的規模化落地。該項目還獲授權發明專利100餘項，部分成果獲得了2022年中國電子學會科技進步一等獎、2023年吳文俊人工智能科技進步一等獎等多個獎項。

支付寶的醫療大模型不僅讓人們看到了AI在醫療領域的廣泛應用前景，也展示了其在提升醫療效率、保障數據安全方面的強大能力。未來，隨着技術的不斷進步和應用的深入，AI醫療大模型有望爲更多人帶來更便捷、更智能的醫療服務體驗。