支付宝在2024世界人工智能大会上重磅发布国内首批多模态医疗大模型之一——支付宝多模态医疗大模型。
这款大模型基于蚂蚁集团自主研发的蚂蚁百灵大模型，具备强大的“视听言画”多模态能力，能够高效处理和理解音频、视频、图像和文本等多种类型的数据。
为了提升医疗领域的应用能力，支付宝多模态医疗大模型融合了海量医疗数据资源，包括数十亿级的中英文图文资料、千亿级医疗文本语料库以及千万级高质量医疗知识图谱。其在中英文医疗考试和基准测试中的表现，甚至可以与GPT-4媲美，甚至超越。
该大模型的应用范围广泛，涵盖智能问答、病历结构化和检索、辅助诊断、药品解析、复杂医学报告解读等多个方面，并可扩展至个性化健康管理，例如毛发健康检测等。 它旨在优化医院和医疗机构的工作流程，显著提升医疗服务效率和质量。
针对医院普遍面临的算力不足问题，支付宝还推出了百灵医疗可信一体机，该设备集成了开箱即用、训练和推理一体化、国产算力支持以及软硬件协同优化加速等功能，为医疗机构提供强大的算力支持。
同时，支付宝还推出了医疗大模型可信云方案，采用公有云和专有云部署模式，结合安全可靠的密态推理技术，有效保障医疗数据隐私和商业机密安全，为医疗行业的数字化转型提供安全保障。
