7月5日,在 2024世界人工智能大會 “可信大模型論壇 ”上,支付寶公布了其 AI 技術在醫療領域布局的最新進展:發布多模態醫療大模型。
支付寶醫療大模型的基座模型為螞蟻百靈大模型。據螞蟻集團大模型應用部總經理顧進杰介紹,螞蟻百靈大模型已具備能“看”會“聽”、能“說”會“畫”的原生多模態能力,可以直接理解并訓練音頻、視頻、圖、文等多模態數據。
以此為基座模型,支付寶醫療大模型添加了包含報告、影像、藥品等百億級中英文圖文、千億級醫療文本語料及千萬級高質量醫療知識圖譜,中英文醫療考試、基準測試達到或超過GPT4水準。
其醫療專業能力在中文醫療 LLM 評測榜單 promptCBLUE 中,位列 A 榜第一,B 榜第二。同時,全棧自研醫療多模態結構,使得模型識別報告、藥品、毛發等圖像準確率達 90% 以上。
據悉,在研發階段,支付寶與數百個專業醫學團隊、專家進行合作標注數據,保障信息權威可信,同時聯合上海仁濟醫院推出首個中文醫療專科問答推理數據集 RJUA-QA。模型測試階段,用戶、患者、醫生參與問答反饋,從而讓回答對話更加可靠。
目前,支付寶醫療大模型不僅提供智能問答、病歷結構化和檢索、輔助診斷,還可識別解讀藥品及上百種復雜的醫學報告,進行毛發健康檢測等,可嵌入醫院等機構醫療環節全流程,創新醫療服務的同時,助力提升機構運營效率。
為保障醫療場景下的技術可靠與數據隱私安全,支付寶此次還推出了“醫療可信一體機+可信云”解決方案。其中,百靈醫療可信一體機,可實現開箱即用,訓推一體,支持國產算力,解決醫院面臨的算力不足痛點。醫療大模型可信云方案則通過公有云與專有云部署密態推理,聚焦解決數據隱私安全和商業機密保護問題。現場,支付寶還與人民衛生出版社、北京大學醫學部、浙江省衛生健康委等 20 家機構,聯合發起 AI 醫療共建計劃,共同探索大模型應用及各類專科模型創新研發。
注:文章來源于網絡,如有侵權,請聯系刪除