网易首页 > 网易号 > 正文 申请入驻

智谱发布GLM-5技术细节:工程级智能,适配国产算力

0
分享至

2月12日,智谱发布GLM-5,技惊四座。10天后技术报告出炉,让人们一窥GLM-5模型的内在基因。

有意思的不是又刷了什么榜,而是整个思路变了:不再比参数大小,开始比系统工程能力。

GLM-5做的三件事都挺实在:1、模型真的能完成复杂任务了,不只是写几行代码;2、训练效率上了一个台阶,超大模型不再是纯烧钱游戏;3、从底层到推理框架全面适配国产芯片——这个最关键。

如果说之前是“中国在追赶”,现在则已经开始搭自己的技术体系了。

从"给代码"到"做系统"

报告提了个概念转变:从 Vibe Coding 到 Agentic Engineering。前者是你说一句我给段代码,后者是你给目标、我自己规划拆解、写代码调工具、调试迭代,直到把整个系统搞定。

GLM-5的重点已经不是单题得分,而是:

200K上下文(几百页文档的量)
跨文件软件工程任务
长周期任务中持续规划修正
多轮交互保持思考一致性

比如 Vending-Bench 2 要求"模拟经营自动售货机一年",最后看账户余额。GLM-5在开源模型里第一,接近 Claude Opus 4.5。这测的是长期决策能力,不是问答题。

模型开始有"工程级智能"了。

稀疏注意力:不再无脑烧算力

GLM-5有744B参数(激活40B),训练了28.5万亿token。按传统架构,算力消耗会爆炸。

核心创新是DSA(DeepSeek稀疏注意力)。传统注意力机制"看所有内容",计算复杂度平方级增长;DSA动态判断"哪些token真正重要",只算关键部分。

200K长上下文下,DSA把注意力计算量降低1.5–2倍。

而且——无损。

其他高效注意力方法通常牺牲精度,DSA通过继续预训练平滑过渡,性能不退化。

结果是:

  • 同样算力 → 更长上下文
  • 同样成本 → 更高推理能力
  • 同样硬件 → 更大模型

对中国来说,效率创新比堆算力重要得多。

强化学习架构重构

GLM-5的RL体系做了彻底改造。

生成与训练解耦。模型生成轨迹,训练在另一套系统异步进行。过去要等最慢任务完成才继续训练,现在谁先完成谁先训练,吞吐大幅提升。对长程Agent任务至关重要。

异步Agent RL算法解决了真实软件工程中任务持续数小时的问题。引入:

  • Token-in-Token-out(避免重新分词误差)
  • 双侧重要性采样
  • DP-aware路由优化KV cache

模型能在复杂环境中稳定学习,不会因策略偏移崩溃。

说白了,解决的是"如何让大模型在真实任务中持续自我改进"。

真正关键的一步:适配国产算力

报告对中国AI最重要的部分在这。

GLM-5原生适配国产GPU生态,已兼容华为昇腾、摩尔线程、海光、寒武纪、昆仑芯、天数智芯、燧原。

不是"能跑"那种适配,而是:

  • KV cache调度优化
  • 通信机制适配
  • 混合精度训练匹配
  • INT4量化感知训练对齐
  • 分布式并行策略重构

很多国产芯片生态的难点不是算力,是软件栈。

GLM-5的意义在于:不是围绕单一海外硬件架构设计,而是面向多种国产算力平台做系统级适配。

这是个质变——中国大模型开始围绕本土硬件生态做工程优化,不再被动迁移。

报告称,得益于上述软硬协同的极致优化,GLM-5 在单台国产算力节点上的性能表现,已足可媲美由两台国际主流 GPU 组成的计算集群;不仅如此,在长序列处理场景下,其部署成本更是大幅降低了 50%。

软硬件闭环正在形成

把GLM-5的技术路径拆开看,是个完整闭环:

模型架构创新(DSA)→ 训练效率优化(异步RL)→ 内存与通信压缩(ZeRO、激活卸载)→ 低精度对齐(INT4 QAT)→ 国产芯片深度适配

这是一条完整的国产AI工程链路。

过去中国AI的优势在应用层,现在开始进入架构创新、算法工程、训练系统、芯片适配、推理框架的全栈优化。

这份技术报告的真正意义,不在某个基准测试分数,在于中国AI第一次以"体系能力"展示竞争力。

从炫技到成熟

GLM-5的报告没过度强调"我们比谁强多少",详细披露训练流程、算法选择、工程权衡、消融实验。这本身就是成熟的表现。

当一个模型开始谈GPU利用率、长尾延迟、KV cache复用、量化kernel对齐、灾难性遗忘控制——它已经不是在秀能力,而是在做工业级系统。

对中国来说,GLM-5更像是一次宣告:我们不仅能做大模型,也能做自己的算力适配,还能把两者打通。

这才是真正的跨越。

特别声明:以上内容(如有图片或视频亦包括在内)为自媒体平台“网易号”用户上传并发布,本平台仅提供信息存储服务。

Notice: The content above (including the pictures and videos if any) is uploaded and posted by a user of NetEase Hao, which is a social media platform and only provides information storage services.

相关推荐
热点推荐
1944年刘少奇急请全军改名,毛主席为何宁犯众怒也要强行叫停?三年后全党惊出冷汗

1944年刘少奇急请全军改名,毛主席为何宁犯众怒也要强行叫停?三年后全党惊出冷汗

史海孤雁
2026-04-10 17:06:11
国防部曾发出最后通牒:关于如何处理赖清德,大陆早考虑好了

国防部曾发出最后通牒:关于如何处理赖清德,大陆早考虑好了

南宗历史
2026-04-19 23:07:54
2026教师改革:1800万人的教师的身份都变了

2026教师改革:1800万人的教师的身份都变了

猫叔东山再起
2026-04-20 09:05:09
确定!不走了,三届全明星后卫,正式留在快船,6场白拿1100万

确定!不走了,三届全明星后卫,正式留在快船,6场白拿1100万

球童无忌
2026-04-20 22:51:55
婆婆八十大寿没叫我,我关机度假一月,回来老公催还寿宴垫款

婆婆八十大寿没叫我,我关机度假一月,回来老公催还寿宴垫款

艺鉴在线
2026-04-21 00:51:49
青春期教育最大的误区:父母拼命讲道理,孩子却只想你安静听他说

青春期教育最大的误区:父母拼命讲道理,孩子却只想你安静听他说

百合家庭教育
2026-04-20 09:37:14
天文学家彭罗斯:人类的死亡只是宇宙的幻象,生命是不可能终结的

天文学家彭罗斯:人类的死亡只是宇宙的幻象,生命是不可能终结的

心中的麦田
2026-03-06 19:27:32
原来她早已去世,带病演出,从患病到离世仅16天,去世原因心痛

原来她早已去世,带病演出,从患病到离世仅16天,去世原因心痛

华人星光
2026-04-20 10:15:09
网友爸爸2年前垃圾堆里捡回72条32GB DDR4内存:如今价值近14万

网友爸爸2年前垃圾堆里捡回72条32GB DDR4内存:如今价值近14万

快科技
2026-04-20 10:51:04
包养10位情妇,睡觉翻牌生下11个私生子,75岁还在拼命生娃!

包养10位情妇,睡觉翻牌生下11个私生子,75岁还在拼命生娃!

来科点谱
2026-02-16 07:12:06
迎来复兴曙光 全新奔驰S级轿跑车假想图曝光

迎来复兴曙光 全新奔驰S级轿跑车假想图曝光

车质网
2026-04-20 09:11:48
大的要来了!穆杰塔巴撸掉伊朗革命卫队总司令,换了个不怕死的

大的要来了!穆杰塔巴撸掉伊朗革命卫队总司令,换了个不怕死的

杰丝聊古今
2026-04-11 19:07:34
让人揪心的事终究来了?央行定调,5月后房产、存款或将迎来调整

让人揪心的事终究来了?央行定调,5月后房产、存款或将迎来调整

复转这些年
2026-04-19 23:17:41
金像奖成功收官:四大尴尬,三大暖心,两个意外发现,谢霆锋赢麻

金像奖成功收官:四大尴尬,三大暖心,两个意外发现,谢霆锋赢麻

八斗小先生
2026-04-20 16:37:47
看上去像“公务员”,其实连编制都没有的6个职业

看上去像“公务员”,其实连编制都没有的6个职业

细说职场
2026-04-12 17:02:40
200天后:如果阿森纳在长期领跑后错失英超冠军,这将是史上最大崩盘——阿尔特塔可能永远无法恢复

200天后:如果阿森纳在长期领跑后错失英超冠军,这将是史上最大崩盘——阿尔特塔可能永远无法恢复

绿茵情报局
2026-04-21 00:56:43
4月21日收盘:美股小幅收跌,市场关注美伊局势不确定性

4月21日收盘:美股小幅收跌,市场关注美伊局势不确定性

新浪财经
2026-04-21 04:10:47
中国坚决拒绝谈判,光刻机封锁引发全球紧张局势

中国坚决拒绝谈判,光刻机封锁引发全球紧张局势

普陀动物世界
2026-04-20 18:18:17
伊朗向中国通报内幕!谈判团差点被美军“团灭”,连电话都不敢打

伊朗向中国通报内幕!谈判团差点被美军“团灭”,连电话都不敢打

风信子的花
2026-04-19 16:46:59
更新大潮来了?中央发文定调:2026年起20年房龄老房子或又吃香了

更新大潮来了?中央发文定调:2026年起20年房龄老房子或又吃香了

专业聊房君
2026-04-18 16:45:50
2026-04-21 04:44:49
华尔街见闻官方 incentive-icons
华尔街见闻官方
中国领先的金融商业信息提供商
144858文章数 2653325关注度
往期回顾 全部

科技要闻

HUAWEI Pura X Max发布 售价10999元起

头条要闻

19岁女孩挪用自家1700万当"榜一大姐" 亲爹带女儿自首

头条要闻

19岁女孩挪用自家1700万当"榜一大姐" 亲爹带女儿自首

体育要闻

阿森纳已拼尽全力,但你早干嘛去了...

娱乐要闻

《八千里路云和月》田家泰暗杀

财经要闻

利润暴跌7成,字节到底在做什么

汽车要闻

把天门山搬进厂?开仰望U8冲上45度坡的那刻 我腿软了

态度原创

时尚
本地
游戏
健康
公开课

春天衣服不用准备太多!这几大单品提前备好,百搭实用又不过时

本地新闻

12吨巧克力有难,全网化身超级侦探添乱

大司马回归两个月,某音人气稳居顶流行列,道出风光背后心酸现状

干细胞抗衰4大误区,90%的人都中招

公开课

李玫瑾:为什么性格比能力更重要?

无障碍浏览 进入关怀版