网易首页 > 网易科技 > 网易科技 > 正文

支付宝发布多模态医疗大模型

0
分享至

7月5日消息,在2024世界人工智能大会“可信大模型论坛”上,支付宝公布了其AI技术在医疗领域布局的最新进展:发布多模态医疗大模型,同时,全新推出包括医疗可信一体机、可信云等多款数智化解决方案。


蚂蚁集团大模型应用部总经理顾进杰介绍,蚂蚁百灵大模型已具备能“看”会“听”、能“说”会“画”的原生多模态能力,可以直接理解并训练音频、视频、图、文等多模态数据。支付宝医疗大模型以此为基座模型,添加了包含报告、影像、药品等百亿级中英文图文、千亿级医疗文本语料及千万级高质量医疗知识图谱,中英文医疗考试、基准测试达到或超过GPT4水准,医疗专业能力在中文医疗LLM评测榜单promptCBLUE中,位列A榜第一,B榜第二。同时,全栈自研医疗多模态结构,使得模型识别报告、药品、毛发等图像准确率达90%以上,相关技术在行业顶尖技术期刊与会议 CVPR、KDD、ECCV等发表了多项成果。

在研发阶段,支付宝还与数百个专业医学团队、专家进行合作标注数据,保障信息权威可信,同时联合上海仁济医院推出首个中文医疗专科问答推理数据集RJUA-QA。模型测试阶段,用户、患者、医生参与问答反馈,在专业同时,兼顾患者关怀。

目前,该多模态医疗大模型不仅提供智能问答、病历结构化和检索、辅助诊断,还可识别解读药品及上百种复杂的医学报告,进行毛发健康检测等,这些都能嵌入医院等机构医疗环节全流程,创新医疗服务的同时,也助力提升机构运营效率。

顾进杰表示,AI的深度应用,不仅对数据、算法、算力提出了更高要求,也对可靠、安全、隐私提出更多挑战,医疗场景下,保障技术可靠与数据隐私安全,至关重要。为此,支付宝面向行业推出全新的“医疗可信一体机+可信云”的解决方案,通过密态计算与存储,让医疗数据可用不可见,机构保管更安全。

据介绍,百灵医疗可信一体机,核心解决医院面临的算力不足痛点,可实现开箱即用,训推一体,支持国产算力,软硬件协同优化加速。医疗大模型可信云方案,通过公有云与专有云部署密态推理,聚焦解决数据隐私安全和商业机密保护问题。

大会现场,支付宝、人民卫生出版社、北京大学医学部、浙江省卫生健康委、厦门市卫生健康委员会、浙江省人民医院、上海交通大学医学院附属仁济医院、北京大学人民医院、复旦大学附属肿瘤医院、上海市第一人民医院、首都医科大学附属医院等20多家机构、企业,联合发起了AI医疗共建计划,共同探索大模型应用及各类专科模型创新研发。

支付宝副总裁、数字医疗健康事业部总经理张俊杰表示:“支付宝希望用最顶尖的技术做最普惠的服务,让AI像‘扫码支付’一样便利每个人的生活。支付宝也会持续开放AI技术与行业解决方案,携手合作伙伴一起,推动智能医疗走向普惠、普及。”(一橙)

本文来自网易科技报道,更多资讯和深度内容,关注我们。

延伸阅读
相关推荐
热点推荐
马云现身世界杯决赛看台 和联想杨元庆轻松闲谈

马云现身世界杯决赛看台 和联想杨元庆轻松闲谈

快科技
2026-07-20 19:14:16
张小斐放弃800万片酬,零片酬押分红,预计赚2275万,风险多大?

张小斐放弃800万片酬,零片酬押分红,预计赚2275万,风险多大?

动物奇奇怪怪
2026-07-21 14:56:45
喝的中药大半是假货!药材全链条造假,千年中医被自己人毁掉

喝的中药大半是假货!药材全链条造假,千年中医被自己人毁掉

咸鱼金脑袋
2026-07-19 10:55:20
长沙一大四女生因考试失利高空抛物近半小时,多方回应:无人员受伤,当事人已送医治疗

长沙一大四女生因考试失利高空抛物近半小时,多方回应:无人员受伤,当事人已送医治疗

上游新闻
2026-07-21 18:26:10
如果乌克兰的下个目标是安加尔斯克炼油厂,战争离结束就不远了

如果乌克兰的下个目标是安加尔斯克炼油厂,战争离结束就不远了

世界地缘观察
2026-07-19 08:18:53
世界杯最强玄学!西班牙夺冠:4条“世界杯铁律”全部应验

世界杯最强玄学!西班牙夺冠:4条“世界杯铁律”全部应验

邱泽云
2026-07-20 20:01:01
终于找到冉莹颖非要创业原因:11年前岳母一句“求你了”,如今邹市明冉莹颖亏损2个亿

终于找到冉莹颖非要创业原因:11年前岳母一句“求你了”,如今邹市明冉莹颖亏损2个亿

毒舌八卦
2026-07-19 21:11:39
碰见中国人就打?这个国家有多讨厌中国人,为何我们还要去旅游?

碰见中国人就打?这个国家有多讨厌中国人,为何我们还要去旅游?

怪味历史连连看
2026-07-18 20:48:32
王菲不会出席谢贤葬礼了!她的头像没变,没发任何悼文,更没被拍现身香港,网友发帖引热议

王菲不会出席谢贤葬礼了!她的头像没变,没发任何悼文,更没被拍现身香港,网友发帖引热议

火山詩话
2026-07-21 05:56:34
施一公砸200亿建西湖大学,放话五年超过清华,8年过去反差太大

施一公砸200亿建西湖大学,放话五年超过清华,8年过去反差太大

小兰聊历史
2026-07-13 04:14:31
沙特主导的多国联军发表声明

沙特主导的多国联军发表声明

政知新媒体
2026-07-21 08:28:46
安德鲁·科莫:“社会主义在全球任何地方都未曾成功”,民主党温和派开始反击

安德鲁·科莫:“社会主义在全球任何地方都未曾成功”,民主党温和派开始反击

灰度测试中
2026-07-21 10:17:36
国家电网很多年没见过这么严峻的形势了

国家电网很多年没见过这么严峻的形势了

花小猫的美食日常
2026-07-16 14:17:42
迪拜的商场不是让你买东西的,是让你对买东西这件事彻底失去兴趣

迪拜的商场不是让你买东西的,是让你对买东西这件事彻底失去兴趣

花小猫的美食日常
2026-07-19 12:32:03
曼晚:前曼城队友奥塔门迪、罗德里激烈争执是世界杯丑陋一幕

曼晚:前曼城队友奥塔门迪、罗德里激烈争执是世界杯丑陋一幕

懂球帝
2026-07-20 20:06:05
德里赫特无缘曼联季初比赛!曝利马续约要19万周薪,拉爵考虑卖掉

德里赫特无缘曼联季初比赛!曝利马续约要19万周薪,拉爵考虑卖掉

罗米的曼联博客
2026-07-21 12:24:10
“国家队”600亿增持中国股票!涌入这三大方向→

“国家队”600亿增持中国股票!涌入这三大方向→

新京报
2026-07-21 08:09:04
中央开始严查,多地机关事业单位大整顿启动,这几类人受影响最大

中央开始严查,多地机关事业单位大整顿启动,这几类人受影响最大

职场资深秘书
2026-07-21 13:29:45
杨白劳穷困根源是常年赌博,黄世仁强占喜儿的故事并非真

杨白劳穷困根源是常年赌博,黄世仁强占喜儿的故事并非真

唠叨说历史
2026-07-01 15:57:41
武汉大学招生滑铁卢?莫非是学生害怕被炼成保研丹?

武汉大学招生滑铁卢?莫非是学生害怕被炼成保研丹?

夏夏回来了
2026-07-20 16:55:09
2026-07-21 19:35:00

科技要闻

OpenAI高管:Kimi K3强到没法用"蒸馏"解释

头条要闻

大四女生因考试失利高空抛物近半小时 已被送医治疗

头条要闻

大四女生因考试失利高空抛物近半小时 已被送医治疗

体育要闻

“不会进球”的前锋,在世界杯决赛进球了

娱乐要闻

谢贤被曝已火葬,狄波拉携儿女送别

财经要闻

百虾竞速上车:4条路线争夺车载AI话语权

汽车要闻

热爱驾驶的更棒选择 极氪8X让大块头也有大乐趣

态度原创

家居
亲子
教育
公开课
军事航空

家居要闻

2026建博会(广州) 公装联探展交流活动

亲子要闻

陪伴师教宝宝擤鼻涕,方法简单实用还很有趣,网友:寓教于乐确实不错

教育要闻

2026保研避坑指南:最新口碑靠谱的保研机构怎么选?

公开课

李玫瑾:为什么性格比能力更重要?

军事要闻

美伊再开打 战局出现新变化

无障碍浏览 进入关怀版
×