在2024年世界人工智能大会的「可信大模型论坛」上，支付宝多模态医疗大模型的亮相引起了广泛关注。这款由支付宝推出的医疗大模型，也标志着国内在多模态医疗领域的一次重要突破。
一、 蚂蚁百灵大模型：多模态能力的基石
支付宝医疗大模型的核心技术，源自蚂蚁集团的百灵大模型。
据蚂蚁集团大模型应用部总经理顾进杰介绍，百灵大模型具备了「看」、「听」、「说」、「画」的原生多模态能力，能够直接理解和训练音频、视频、图像和文本等多模态数据。这种能力为医疗大模型的构建提供了坚实的基础。
二、医疗大模型的智能升级
而在百灵大模型的基础上，支付宝医疗大模型则进一步添加了丰富的医疗资源。这包括百亿级的中英文图文资料、千亿级的医疗文本语料，以及千万级的高质量医疗知识图谱。
这些资源的加入，使得支付宝医疗大模型在中英文医疗考试和基准测试中达到了或超过了GPT4的水平。
三、全面的功能覆盖
支付宝医疗大模型的功能覆盖极为广泛。它不仅能够提供智能问答、病历结构化和检索、辅助诊断等服务，还能够识别和解读药品信息以及上百种复杂的医学报告。
此外，它还能够进行毛发健康检测等个性化健康服务。这些功能的集成，使得支付宝医疗大模型能够嵌入到医院等医疗机构的医疗环节全流程中，为患者提供更加精准和便捷的医疗服务。
四、智能医疗的未来展望
支付宝多模态医疗大模型的出现，是医疗行业数字化转型的重要里程碑。它不仅能够提高医疗服务的效率，还能够通过数据分析和模式识别，为医生提供更加精准的诊断依据，从而提高治疗效果。
在医疗资源分布不均的背景下，支付宝医疗大模型的应用，还有助于缩小地区之间的医疗水平差异，实现优质医疗资源的共享。这对于推动医疗公平，提高全民健康水平具有重要意义。
支付宝医疗大模型的亮相，不仅是支付宝在智能医疗领域的一次重要尝试，也是国内多模态医疗大模型发展的一个缩影。
随着技术的不断进步和应用的不断深入，我们期待着支付宝医疗大模型能够在智能医疗领域创造更多的价值，发挥出更大的作用，为人类的健康事业做出更大的贡献。
