支付宝多模态医疗大模型亮相WAIC 2024 智能医疗加速普及

2024年07月05日 15:23  

本文1120字,约2分钟

7月5日,在2024世界人工智能大会的“可信大模型论坛”上,支付宝公布了其在医疗领域的AI技术最新进展。多模态医疗大模型以及包括医疗可信一体机、可信云等多款数智化解决方案。同时,支付宝还与人民卫生出版社、北京大学医学部、浙江省卫生健康委等20家机构联合发起了AI医疗共建计划。

据了解,支付宝此次推出的多模态医疗大模型,是国内首批多模态医疗大模型之一。

该模型基于蚂蚁集团的百灵大模型,具备能“看”会“听”、能“说”会“画”的原生多模态能力,可直接理解并训练音频、视频、图像、文本等多模态数据。通过添加包含报告、影像、药品等百亿级中英文图文、千亿级医疗文本语料及千万级高质量医疗知识图谱,该模型在中英文医疗考试、基准测试中达到或超过了GPT4水准。

与此同时,为了保障医疗大模型的权威性和可信度,支付宝在研发阶段与数百个专业医学团队、专家进行了合作标注数据。同时,还联合上海仁济医院推出了中文医疗专科问答推理数据集RJUA-QA。在模型测试阶段,也邀请了用户、患者、医生参与问答反馈,以确保模型在提供专业医疗建议的同时,也能兼顾患者关怀。

值得关注的是,AI的深度应用,不仅对数据、算法、算力提出了更高要求,也对可靠、安全、隐私提出更多挑战,医疗场景下,保障技术可靠与数据隐私安全至关重要。

据蚂蚁集团大模型应用部总经理顾进杰介绍,针对数据安全,支付宝面向行业推出全新的“医疗可信一体机+可信云”的解决方案,通过密态计算与存储,让医疗数据可用不可见,机构保管更安全。

早在2014年,支付宝就已入局医疗领域,上线远程挂号缴费功能,经过十年发展,平台已服务超6亿看病就医人群。目前,全国300多个城市、超3600家医院在支付宝上提供一站式数字医疗服务。

从去年以来,支付宝就加速了AI技术在医疗领域的开放与布局。去年11月,浙江卫健委应用支付宝开放的“AI就医助理”解决方案打造了数字健康人“安诊儿”,上线以来服务了1000多家医疗机构。上海市第一人民医院应用AI大模型,不仅上线了上海可语音交互的“数字陪诊师”,还在利用生成式电子病历,将繁杂的文书工作从原本的10分钟缩减到了15秒。

支付宝副总裁、数字医疗健康事业部总经理张俊杰表示,支付宝希望用技术做最普惠的服务,让AI像“扫码支付”一样便利每个人的生活。支付宝也会持续开放AI技术与行业解决方案,与合作伙伴一同推动智能医疗走向普惠、普及。

(《财经》新媒体综编)