网易首页 > 网易号 > 正文 申请入驻

登顶SWE-Bench,快手KAT-Dev-72B-Exp刷新开源SOTA

0
分享至

大规模强化学习作为关键路径,能够有效激发大模型的复杂推理能力并显著提升其任务泛化性。近期,快手Kwaipilot团队重磅发布的KAT-Dev-72B-Exp,在软件开发能力评测基准 SWE-Bench Verified上取得了74.6%的卓越表现,创下开源模型领域新纪录。KAT-Dev-72B-Exp 是 KAT-Coder 模型强化学习的实验版本,我们借助这一开源模型揭秘 KAT-Coder 在大规模强化学习方向上的技术创新。



在 SWE-Bench Verified 上,和全尺寸开源模型对比,KAT-Dev-72B-Exp 以74.6%的卓越性能创下新纪录

作为Kwaipilot在端到端复杂强化学习领域的前沿探索成果,该模型基于自研 SeamlessFlow 工业级强化学习框架,通过创新的数据平面架构实现了训练逻辑与 Agent 的完全解耦,成功支持多智能体和在线强化学习等复杂场景。针对复杂 Agent 场景的技术挑战,团队创新性地引入Trie Packing机制,并对训练引擎进行了重构优化,使模型能够高效地在共享前缀轨迹上开展训练。通过难度感知的策略优化,实现了探索与利用的平衡,并结合基于开源仓库构建的大规模端到端可验证软件工程任务,KAT-Dev-72B-Exp 在编程领域展现出强大的能力。

免费试用KAT-Coder:https://www.streamlake.ai/product/kat-coder

KAT-Dev-72B-Exp开源地址:https://huggingface.co/Kwaipilot/KAT-Dev-72B-Exp

在agentic RL训练过程中,模型训练的成功离不开高效、可扩展的数据环境支撑。传统方法往往局限于单一数据集和固定框架,导致模型在面对复杂现实场景时表现欠佳。通过持续的实践探索,Kwaipilot 团队逐渐意识到大规模 scaling 数据环境的重要性。这不仅是数据量的堆积,更是构建一个动态、灵活的生态系统,让模型能够从海量且多样化的数据中汲取营养,实现从“实验室玩具”到“实战高手”的跃升。

为此,Kwaipilot 团队正积极投入建设一套大规模数据环境管理系统。这套系统的核心在于实现训练数据、训练沙盒(sandbox)以及训练框架的完全解耦。通过这种设计,数据源可以独立扩展,而不会受限于特定框架的约束;沙盒环境则提供安全的隔离测试空间,避免干扰主流程;训练框架也能灵活切换,支持多种算法迭代。这种解耦机制极大提升了系统的模块化程度,让开发团队能够更高效地协作,避免了以往“牵一发而动全身”的瓶颈。

更重要的是,该系统显著加速了训练数据的扩充过程。我们的数据环境管理系统采用统一的数据协议,可以快速整合开源的以及各种多源数据环境。数据环境涵盖代码、数学、游戏、博弈等多个领域。在这样的环境中,模型可以通过 RL 反复迭代,逐步适应各种复杂情境,进一步增强其泛化能力。模型不再局限于单一的环境,而是能在跨领域的环境中自适应,也更能在没有见过的环境中有更好的表现,提升其鲁棒性和实用性。

特别声明:以上内容(如有图片或视频亦包括在内)为自媒体平台“网易号”用户上传并发布,本平台仅提供信息存储服务。

Notice: The content above (including the pictures and videos if any) is uploaded and posted by a user of NetEase Hao, which is a social media platform and only provides information storage services.

相关推荐
热点推荐
金鸡奖最大讽刺:陈凯歌用18年没捧红的儿子,一夜站上C位

金鸡奖最大讽刺:陈凯歌用18年没捧红的儿子,一夜站上C位

可乐谈情感
2025-11-16 01:27:36
正部级蔡名照、叶冬松、黄明、宋秀岩、冯正霖、许又声、苗圩、傅自应、欧阳坚、黄建盛,有新任务

正部级蔡名照、叶冬松、黄明、宋秀岩、冯正霖、许又声、苗圩、傅自应、欧阳坚、黄建盛,有新任务

新京报政事儿
2025-11-15 20:41:56
医院真不愧是“奇葩聚集地”,护士遇到过炸裂的事,光听着就好惨

医院真不愧是“奇葩聚集地”,护士遇到过炸裂的事,光听着就好惨

一桶浆糊要一统江湖
2025-11-13 21:10:03
影响全球2%石油供应,乌克兰攻击俄罗斯第二大石油码头,已被炸停

影响全球2%石油供应,乌克兰攻击俄罗斯第二大石油码头,已被炸停

鹰眼Defence
2025-11-15 17:25:44
景甜惊艳亮相,前凸后翘,简约时尚,张继科肠子都悔青?

景甜惊艳亮相,前凸后翘,简约时尚,张继科肠子都悔青?

娱乐领航家
2025-11-15 19:00:03
以防长:加沙地带哈马斯武装预计将由美主导国际部队解除

以防长:加沙地带哈马斯武装预计将由美主导国际部队解除

财联社
2025-11-17 01:04:03
新别克君威上市,融入宝马经典元素!

新别克君威上市,融入宝马经典元素!

米粒说车唯一呀
2025-11-16 21:12:54
南部战区新闻发言人发表谈话

南部战区新闻发言人发表谈话

界面新闻
2025-11-16 11:29:53
《荒野神医》周代芙段乐天段大爷/周代芙最近很是苦恼,她感觉自

《荒野神医》周代芙段乐天段大爷/周代芙最近很是苦恼,她感觉自

消逝的光芒jf
2025-11-16 19:44:30
别再为孙颖莎“被骂”打抱不平了!张继科:她本就不只靠天赋赢的

别再为孙颖莎“被骂”打抱不平了!张继科:她本就不只靠天赋赢的

讯崽侃天下
2025-10-26 21:25:22
毛主席的机要秘书“小谢”有多美?清纯可爱,曾任北京市委书记

毛主席的机要秘书“小谢”有多美?清纯可爱,曾任北京市委书记

万物知识圈
2025-11-16 09:23:42
日本专家对比中日军事实力:若发生空战和海战,还是日本更强?

日本专家对比中日军事实力:若发生空战和海战,还是日本更强?

云上乌托邦
2025-09-04 11:45:33
中方通告全球:3名航天员带回约100斤太空“特产”,引发高度关注

中方通告全球:3名航天员带回约100斤太空“特产”,引发高度关注

一个有灵魂的作者
2025-11-15 21:09:12
曾琦医生的事还没过去,又来个劲爆的!

曾琦医生的事还没过去,又来个劲爆的!

诗意世界
2025-11-11 10:42:51
比赛还有6天开打,上海申花先迎来两个重大喜讯,取胜津门虎稳了

比赛还有6天开打,上海申花先迎来两个重大喜讯,取胜津门虎稳了

零度眼看球
2025-11-16 08:40:09
烧光155亿,超级独角兽要破产了

烧光155亿,超级独角兽要破产了

华尔街见闻官方
2025-11-16 20:07:40
越南史上最大外汇股票欺诈案主谋在菲律宾落网:绰号“猎人先生”,涉案金额近15亿元

越南史上最大外汇股票欺诈案主谋在菲律宾落网:绰号“猎人先生”,涉案金额近15亿元

红星新闻
2025-11-16 18:01:06
“香港最后一个天后”,如今43岁孤身一人,藏着太多不为人知

“香港最后一个天后”,如今43岁孤身一人,藏着太多不为人知

大龄女一晓彤
2025-11-12 15:53:18
官方提醒国人“避免前往”:日本旅游雪上加霜?

官方提醒国人“避免前往”:日本旅游雪上加霜?

环球旅讯
2025-11-15 09:58:16
又轰27分12板10助,MVP榜第一!抱歉威少,你的历史三双王真悬了

又轰27分12板10助,MVP榜第一!抱歉威少,你的历史三双王真悬了

锅子篮球
2025-11-16 14:23:27
2025-11-17 02:44:49
新经济观察团
新经济观察团
深度聚焦金融公司发展动态
1388文章数 133关注度
往期回顾 全部

科技要闻

雷军,怒了!刚刚连发多条微博

头条要闻

中国公民需谨慎前往日本 四大原因披露

头条要闻

中国公民需谨慎前往日本 四大原因披露

体育要闻

最佳新秀候选!2028美国男篮有他一个位置

娱乐要闻

CEO爆料肖战《藏海传》狂赚几十亿!

财经要闻

房源暗中调价 央企举报广州国资房企

汽车要闻

"冰彩沙"全配齐 红旗HS6 PHEV预售17.88万起

态度原创

健康
游戏
艺术
旅游
亲子

血液科专家揭秘白血病七大误区

《纪元117:罗马和平》多人游戏问题大 育碧承诺修复

艺术要闻

这些获奖摄影作品,简直让人目不暇接!

旅游要闻

一票游多日,一举能多得|新京报社论

亲子要闻

一分钟教你判断孩子的咳嗽代表什么

无障碍浏览 进入关怀版