网易首页 > 网易号 > 正文 申请入驻

蚂蚁集团,AI重大突破!

0
分享至

蚂蚁集团使用国产AI芯片训练大模型,成本可进一步降低。

近日,蚂蚁集团Ling团队发表了一篇技术成果论文。论文显示,蚂蚁集团推出了两款不同规模的MoE大语言模型——百灵轻量版(Ling-Lite)与百灵增强版(Ling-Plus),前者参数规模为168亿(激活参数27.5亿),Plus基座模型参数规模高达2900亿(激活参数288亿),两者性能均达到行业领先水平。

除了自研性能领先的大模型以外,该技术论文最大的突破在于提出了一系列创新方法,以提升资源受限环境下AI开发的效率与可及性。实验表明,其3000亿参数的MoE(混合专家)大模型可在使用国产GPU的低性能设备上完成高效训练,性能与完全使用英伟达芯片、同规模的稠密模型及MoE模型相当。

在低性能硬件上高效训练的自研大模型

目前,蚂蚁集团Ling团队的技术成果论文《每一个FLOP都至关重要:无需高级GPU即可扩展3000亿参数混合专家LING大模型》已发表在预印版Arxiv平台上。

据技术成果论文,虽然DeepSeek、阿里通义千问、MiniMax等系列的MoE大模型在特定任务中展现出卓越性能,但是MoE模型的训练通常依赖高性能计算资源(如英伟达H100/H800等先进GPU),高昂成本制约了在资源受限环境中的普及应用。同时,近年来英伟达高性能芯片持续短缺,相比之下,低性能加速器供应更充足且单机成本更低。这种差异凸显了构建跨异构计算单元与分布式集群无缝切换技术框架的必要性。

因此,Ling团队设定的目标是“不使用高级GPU”来扩展模型,并通过提出创新性的训练策略,旨在突破资源与预算限制实现高效大语言模型训练,从而推动AI技术向普惠化方向发展。

具体而言,团队提出的创新策略包括:1)架构与训练策略革新:动态参数分配与混合精度调度技术;2)训练异常处理机制升级:自适应容错恢复系统缩短中断响应时间;3)模型评估流程优化:自动化评测框架压缩验证周期超50%;4)工具调用能力突破:基于知识图谱的指令微调提升复杂任务执行精度。

据技术论文,Ling团队在五种不同的硬件配置上对9万亿个token进行Ling-Plus的预训练,其中使用高性能硬件配置训练1万亿token的预训练成本约为635万元人民币,但利用蚂蚁的优化方法后,使用低规格硬件的训练成本将降至508万元左右,节省了近20%,最终实现与阿里通义Qwen2.5-72B-Instruct和DeepSeek-V2.5-1210-Chat相当的性能。

此前,DeepSeek通过一系列算法创新及工程优化,使用性能较低的英伟达H800训练出了性能与顶尖模型相当的V3与R1,为大模型的训练开辟了新的道路,让更多的企业和研究机构看到了降低成本、提高效率的可能性。如果蚂蚁集团的技术成果得到验证及推广,意味着国产大模型能够寻找成本更低、效率更高的国产芯片或其他替代方案,以进一步降低对英伟达芯片的依赖。

蚂蚁持续加码AI应用与人形机器人

记者了解到,百灵大模型作为蚂蚁集团自研的大模型,重点布局在生活服务、金融服务、医疗健康等场景的应用。去年5月,蚂蚁在开放日上对外展示了多个AI创新应用产品,并首次公布了AI应用矩阵。蚂蚁集团CTO何征宇透露,基于蚂蚁百灵大模型的三个应用是蚂蚁当下重点破局方向:生活管家、就医助理及金融助手。

3月21日,蚂蚁宣布AI医疗领域的最新进展:发布面向医疗机构、医生、用户三端的AI产品体系升级,其中,面向医疗机构,我们联合华为医疗卫生军团、阿里云、苹果等推出“蚂蚁医疗大模型一体机”全栈式解决方案;面向医生,发布AI医生助手系列工具;同时,面向用户的健康应用“AI健康管家”也推出智能思考、健康自测等十余项新功能。

除了AI以外,蚂蚁近期在人形机器人领域也动作频频。今年2月,某招聘平台信息显示,蚂蚁集团开放招聘具身智能人形机器人系统和应用等岗位,年薪高达百万元。而早在去年12月,蚂蚁集团就注册成立了上海蚂蚁灵波科技有限公司,聚焦具身智能技术和产品研发。

据浦东发布消息,3月11日,上海蚂蚁灵波科技有限公司在上海浦东举行揭牌仪式。据介绍,蚂蚁灵波科技是蚂蚁集团拓展具身智能和机器人业务的主要载体,致力在家庭、养老、医疗健康等领域打造行业领先的机器人产品,此番落地将与浦东携手共进,在未来产业新赛道上相互促进、共谋发展,助力浦东加快技术引领、行业集聚、产业升级步伐,打造以人形机器人为引领的具身智能创新高地和具有行业影响力的创新产业生态。

具身智能人形机器人作为新兴领域,具有广阔的市场前景和巨大的商业潜力。蚂蚁集团可能希望通过布局该领域,探索新的增长点,并推动人机交互的新体验。此外,具身智能人形机器人技术还可以与蚂蚁集团现有的金融科技业务产生协同效应,共同推动技术创新和业务升级。

业内人士分析称,具身智能人形机器人为新兴领域,市场前景广阔。蚂蚁集团布局该领域,有助于探索新的增长点,并基于自身在人工智能、大数据、云计算等方面的技术优势和已有业务布局,加速人形机器人的研发和在相关业务场景中的应用。

责编:叶舒筠

校对:彭其华

(点击图片进入报名页面)

版权声明

" Type="normal"@@-->

证券时报各平台所有原创内容,未经书面授权,任何单位及个人不得转载。我社保留追究相关行为主体法律责任的权利。

转载与合作可联系证券时报小助理,微信ID:SecuritiesTimes" Type="normal"@@-->

END

" Type="normal"@@-->

特别声明:以上内容(如有图片或视频亦包括在内)为自媒体平台“网易号”用户上传并发布,本平台仅提供信息存储服务。

Notice: The content above (including the pictures and videos if any) is uploaded and posted by a user of NetEase Hao, which is a social media platform and only provides information storage services.

相关推荐
热点推荐
三峡大坝“账本”曝光:运行了20余年,2500亿投入如今回本了吗?

三峡大坝“账本”曝光:运行了20余年,2500亿投入如今回本了吗?

墨兰史书
2026-01-26 08:20:07
收退赛大礼!德约0-2落后穆塞蒂伤退 进四强澳网103胜超费德勒

收退赛大礼!德约0-2落后穆塞蒂伤退 进四强澳网103胜超费德勒

醉卧浮生
2026-01-28 14:58:32
蠢蠢欲动!曼城想挖角皇马天才飞翼,黄金年龄,努内斯最佳替代者

蠢蠢欲动!曼城想挖角皇马天才飞翼,黄金年龄,努内斯最佳替代者

零度眼看球
2026-01-28 15:27:38
广东2岁女童草地上捡到70克黄金项链,爸爸全网寻人,派出所工作人员刷到视频帮其找到失主

广东2岁女童草地上捡到70克黄金项链,爸爸全网寻人,派出所工作人员刷到视频帮其找到失主

环球网资讯
2026-01-27 20:47:08
百万问界背后:赛力斯半年市值蒸发800亿

百万问界背后:赛力斯半年市值蒸发800亿

每人Auto
2026-01-27 14:20:02
阚清子生产事件一个月后,连发四条微博复出工作!网友:太拼了

阚清子生产事件一个月后,连发四条微博复出工作!网友:太拼了

有范又有料
2026-01-28 13:42:19
马云:AI时代的教育是让一千个学生提出一万个不同的好问题

马云:AI时代的教育是让一千个学生提出一万个不同的好问题

澎湃新闻
2026-01-28 11:15:05
当AI成为圭臬:我们正在制造新的“低端”与新的羞耻

当AI成为圭臬:我们正在制造新的“低端”与新的羞耻

澎湃新闻
2026-01-27 14:29:03
平均每人负债1300万,书记吴仁宝去世10年后,华西村的现况如何?

平均每人负债1300万,书记吴仁宝去世10年后,华西村的现况如何?

哄动一时啊
2026-01-24 21:29:54
2025全球车企销量TOP10

2025全球车企销量TOP10

大象新闻
2026-01-26 11:01:05
Mac mini被一夜抢空?Clawdbot,给了苹果最不想接的泼天富贵……

Mac mini被一夜抢空?Clawdbot,给了苹果最不想接的泼天富贵……

AI深度科技
2026-01-28 10:55:28
没滤镜真可怕!秦海璐满脸沟壑,梅婷黑胖土,章子怡肿成大饼脸

没滤镜真可怕!秦海璐满脸沟壑,梅婷黑胖土,章子怡肿成大饼脸

林轻吟
2026-01-28 09:06:51
果不其然,斯塔默还未落地,英国传出杂音,先给中国来个下马威

果不其然,斯塔默还未落地,英国传出杂音,先给中国来个下马威

知法而形
2026-01-28 14:49:27
牢A还是太保守了,女留子英国学粤语,知情人:她都拍视频了

牢A还是太保守了,女留子英国学粤语,知情人:她都拍视频了

泽泽先生
2026-01-27 21:24:40
海归光环已经消失?49.5万留学生涌回国,残酷真相:企业只认这个

海归光环已经消失?49.5万留学生涌回国,残酷真相:企业只认这个

南宗历史
2026-01-24 22:48:56
GDP首次突破14万亿元,江苏公布2025年经济成绩单

GDP首次突破14万亿元,江苏公布2025年经济成绩单

澎湃新闻
2026-01-28 11:47:04
美航母还在路上,伊朗先下死手,导弹突袭盟友基地,五角大楼慌了

美航母还在路上,伊朗先下死手,导弹突袭盟友基地,五角大楼慌了

趣文说娱
2026-01-27 16:06:46
当了半辈子风水先生,如今金盆洗手,有些事不说出来我良心不安

当了半辈子风水先生,如今金盆洗手,有些事不说出来我良心不安

卡西莫多的故事
2026-01-25 13:20:07
斯普利特:杨瀚森今天攻防两端都有贡献,在场上显得愈发从容

斯普利特:杨瀚森今天攻防两端都有贡献,在场上显得愈发从容

懂球帝
2026-01-28 11:48:19
花椒立大功?浙大研究发现:花椒可在36小时清除70%老化细胞?

花椒立大功?浙大研究发现:花椒可在36小时清除70%老化细胞?

蜉蝣说
2026-01-28 11:09:12
2026-01-28 15:56:49
证券时报 incentive-icons
证券时报
运营主体:深圳证券时报社有限公司
862181文章数 238690关注度
往期回顾 全部

科技要闻

它是神也是毒!Clawdbot改名卷入千万诈骗

头条要闻

运动员退役后到山区支教:卖掉36块奖牌 与女友分手

头条要闻

运动员退役后到山区支教:卖掉36块奖牌 与女友分手

体育要闻

冒充职业球员,比赛规则还和对手现学?

娱乐要闻

王祖贤入驻某音:一条7秒视频吸粉55万

财经要闻

40倍杠杆断裂!水贝一黄金平台兑付困难

汽车要闻

中国豪华车老大之争:奥迪凭啥干掉奔驰宝马?

态度原创

手机
艺术
健康
数码
公开课

手机要闻

小米REDMI Turbo 5官宣搭载天玑8500-Ultra处理器,明晚发布

艺术要闻

震撼!19世纪油画巨匠的作品美得不可思议!

耳石症分类型,症状大不同

数码要闻

379元 小米首款室外4G摄像机发布:流量免费、不限速 一台顶两台

公开课

李玫瑾:为什么性格比能力更重要?

无障碍浏览 进入关怀版