7月5日，在2024世界人工智能大会上，支付宝发布了国内首批多模态医疗大模型之一。

该模型基于蚂蚁百灵的多模态能力，可以直接理解并训练音频、视频、图、文等多模态数据。测试期间，对诊疗报告、医学药品、毛发状况等识别准确率达90% 以上，中英文医疗考试、基准测试达到或超过 GPT-4水平。

图源备注:图片由AI生成，图片授权服务商Midjourney

此外，支付宝还推出了与大模型配套的可信一体机与云解决方案，并与全国20家头部三甲医院、医疗管理机构，联合发起 AI 医疗共建计划，探索大模型创新应用。

划重点:

– 💡 支付宝发布多模态医疗大模型，可训练音频、视频、图、文等多模态数据。

– 💡 测试期间，对诊疗报告、医学药品、毛发状况等识别准确率达90% 以上，中英文医疗考试、基准测试达到或超过 GPT-4水平。

– 💡 支付宝还推出了与大模型配套的可信一体机与云解决方案，并与全国20家头部三甲医院、医疗管理机构，联合发起 AI 医疗共建计划，探索大模型创新应用。