网易首页 > 新闻中心 > 新闻 > 正文

又发模型!文心开源全新多模态深度思考模型

0
分享至

11月11日,百度正式对外推出文心模态思考模型ERNIE-4.5-VL-28B-A3B-Thinking,新模型全面开源。公开评测数据显示,该模型在多项多模态理解与推理任务中表现优异,仅需3B激活参数,性能表现接近业界领先的GPT-5-High与Gemini-2.5-Pro。

作为文心大模型开源家族的最新成员,ERNIE-4.5-VL-28B-A3B-Thinking基于ERNIE-4.5-VL-28B-A3B训练而来,专注于提升多模态理解和跨模态推理能力。与传统“越大越强”的范式不同,该模型通过高效的模型结构设计和强化学习策略,在较小参数规模下实现了高精度的视觉理解与复杂推理。

从评测数据来看,该模型在STEM学科计算、文档图表解析、视觉问答及视频理解等多个维度表现稳定,大部分指标达Gemini-2.5-Pro与GPT-5-High两款海外顶级模型95%百分位水平,部分指标表现如ChartQA和DocVQAval等文档/图表理解任务超过Gemini-2.5-Pro及GPT-5-High。

ERNIE-4.5-VL-28B-A3B-Thinking在多项多模态理解与推理任务中表现优异

值得关注的是,ERNIE-4.5-VL-28B-A3B-Thinking引入了“图像思考”(Thinking with Images)功能,使其具备更接近人类的认知方式——能够主动放大、缩小图像,聚焦细节,并结合上下文进行多步推理。同时,该模型进一步加强了模型定位能力,拥有更强的指令遵循能力,在用户需要时,能够便捷的触发视觉定位功能,适用于需要精确空间感知的应用场景。

当前ERNIE-4.5-VL-28B-A3B-Thinking模型以 Apache License 2.0协议开源,允许商业使用。该模型的预训练权重、推理代码和项目均已在 Hugging Face、Modelscope、飞桨星河社区发布,FastDeploy、 vLLM、Transformers 等开源工具已经实现了对该模型的支持,可以直接加载模型并使用。

文心4.5系列开源模型

公开资料显示,百度在模型开源方面持续发力,自6月30日开源10款文心大模型4.5系列模型以来,不断丰富其开源模型矩阵。9月9日开源的ERNIE-4.5-21B-A3B-Thinking模型在发布三天后登上HuggingFace全球模型总趋势榜和文本模型趋势榜第一。

近期百度在大模型领域的进展也在加速。11月8日,LMArena最新排名显示,百度文心最新模型ERNIE-5.0-Preview-1022在文本能力榜单中位列全球并列第二、国内第一。此外有消息称,百度将于11月13日举行的2025百度世界大会上发布文心大模型全新版本。

相关链接:

Hugging Face:

https://huggingface.co/baidu/ERNIE-4.5-VL-28B-A3B-Thinking

GitHub:

https://github.com/PaddlePaddle/ERNIE

飞桨星河社区:

https://aistudio.baidu.com/overview

魔搭社区:

https://modelscope.cn/organization/PaddlePaddle

文心大模型技术Blog:

https://yiyan.baidu.com/blog/ernie4.5

相关推荐
热点推荐
中国代表:要防止朝鲜半岛生战生乱

中国代表:要防止朝鲜半岛生战生乱

新华社
2026-05-01 09:27:03
消费降级只存在互联网上?五一旅游大军各地刷卡,景区人山人海!

消费降级只存在互联网上?五一旅游大军各地刷卡,景区人山人海!

眼光很亮
2026-05-01 12:41:16
外卖后厨人员在锅里洗扫把、吐口水?当地通报:该店经营者、涉事厨师禁业五年

外卖后厨人员在锅里洗扫把、吐口水?当地通报:该店经营者、涉事厨师禁业五年

界面新闻
2026-05-01 15:30:58
陕西礼泉通报“6人非法锯断槐树采摘槐花”:2人被行拘

陕西礼泉通报“6人非法锯断槐树采摘槐花”:2人被行拘

界面新闻
2026-05-01 11:04:37
政治局会议后48小时,深圳、广州、天津连发楼市新政!全都抢在“五一”前

政治局会议后48小时,深圳、广州、天津连发楼市新政!全都抢在“五一”前

华夏时报
2026-04-30 23:50:09
赵薇黄晓明出席北电96级同学聚会,美女帅哥一堆,班主任气质不俗

赵薇黄晓明出席北电96级同学聚会,美女帅哥一堆,班主任气质不俗

娱乐团长
2026-05-01 13:31:21
2026年一季度国企数据出炉:利润下滑5.1%,降幅明显大于收入降幅

2026年一季度国企数据出炉:利润下滑5.1%,降幅明显大于收入降幅

风向观察
2026-05-01 11:28:13
雷军估计更绝望了,北京车展181款首发新车,卖给谁呢?

雷军估计更绝望了,北京车展181款首发新车,卖给谁呢?

DearAuto
2026-05-01 11:56:57
著名企业家李建宏国外遭车祸去世,享年60岁,靠3万元起步打造14亿资产集团,53岁登顶珠峰

著名企业家李建宏国外遭车祸去世,享年60岁,靠3万元起步打造14亿资产集团,53岁登顶珠峰

极目新闻
2026-05-01 12:53:20
掘狼又爆冲突:约基奇克拉克里德推搡倒地乱作一团 三人均吃T

掘狼又爆冲突:约基奇克拉克里德推搡倒地乱作一团 三人均吃T

醉卧浮生
2026-05-01 11:49:51
伊朗队赴美参加世界杯 特朗普表态

伊朗队赴美参加世界杯 特朗普表态

新京报
2026-05-01 13:03:03
斯诺克赛程:吴宜泽再登场,或扩大领先优势,世界冠军PK打完24局

斯诺克赛程:吴宜泽再登场,或扩大领先优势,世界冠军PK打完24局

刘姚尧的文字城堡
2026-05-01 15:46:26
确认了!上海天气即将转折!明夜降雨+雷电+大风+降温!

确认了!上海天气即将转折!明夜降雨+雷电+大风+降温!

尚虹桥
2026-05-01 14:43:13
2+8+9+3!掘金最烂首发!又一笔毒药合同诞生

2+8+9+3!掘金最烂首发!又一笔毒药合同诞生

篮球实战宝典
2026-05-01 18:31:44
美政府高官突然宣布“敌对行动已结束”,从未起效的这部法律“管”得住特朗普吗?

美政府高官突然宣布“敌对行动已结束”,从未起效的这部法律“管”得住特朗普吗?

红星新闻
2026-05-01 15:51:37
江湖儿女,为什么都不生孩子了?

江湖儿女,为什么都不生孩子了?

黔有虎
2026-04-30 14:53:23
拿了大合同就摆烂!掘金被淘汰揪出最大“罪臣”,威少真是太冤了

拿了大合同就摆烂!掘金被淘汰揪出最大“罪臣”,威少真是太冤了

兵哥篮球故事
2026-05-01 15:44:49
五粮液财报,比扇贝离谱,比许老板大胆

五粮液财报,比扇贝离谱,比许老板大胆

大嘴説
2026-05-01 11:11:19
上海医保新政落地!5月起配药这部分费用提高了

上海医保新政落地!5月起配药这部分费用提高了

看看新闻Knews
2026-05-01 13:24:05
刘晓庆现身开封万岁山武侠城,头戴鲜花乘花车向游客挥手致意,和“王婆”互动冷淡引争议,景区回应

刘晓庆现身开封万岁山武侠城,头戴鲜花乘花车向游客挥手致意,和“王婆”互动冷淡引争议,景区回应

极目新闻
2026-05-01 14:50:46
2026-05-01 19:15:00

头条要闻

"上海最通透爸爸"去世 女儿:他退休20多年这辈子不亏

头条要闻

"上海最通透爸爸"去世 女儿:他退休20多年这辈子不亏

体育要闻

无奈!约基奇:这要在塞尔维亚 全队早被炒了

娱乐要闻

邓超在景德镇被偶遇,穿黑外套逛茶园

财经要闻

GPU神话松动,AI真正的战场变了

科技要闻

苹果上季在华收入继续大增 iPhone收入新高

汽车要闻

限时9.67万起 吉利星越L/星瑞i-HEV智擎混动上市

态度原创

手机
旅游
亲子
公开课
军事航空

手机要闻

小米、iQOO巨屏新机轮番炸场,5月这些新机卷疯了

旅游要闻

郑州绿博园:五一花漾嘉年华+萌宠 打造全时段游园新体验

亲子要闻

那些骗你生女儿系列

公开课

李玫瑾:为什么性格比能力更重要?

军事要闻

伊朗:持续推进海上封锁的行为不可容忍

无障碍浏览 进入关怀版
×