网易首页 > 网易号 > 正文 申请入驻

贾扬清再创业,造了一支AI军团,让GLM-5.2提速534%

0
分享至


智东西
编译 杨京丽
编辑 李水青

智东西7月29日消息,今天,AI大牛、阿里云前副总裁、Lepton AI创始人贾扬清,在离开英伟达约一个月后再次创业,宣布启动Intent Lab,并建立了一支名为Fleet的自主AI团队,希望将用户提出的意图直接转化为生产级软件系统


▲贾扬清介绍Intent Lab的产品(图源:X)

与主要负责编写代码的编程Agent不同,Fleet试图承担一支完整工程团队的工作,从理解需求、设计架构、协调任务,到编写代码、测试验证和上线后的持续改进。

Intent Lab此次公布了Fleet的三项早期成果:

一,通过重新设计大模型推理优化工具TensorRT-LLM代码,将GLM-5.2的推理速度提升了534%。Intent Lab称,这是目前GLM-5.2的最快推理速度

二,根据一条初始指令,从头构建匹配SQLite外部行为的数据库,整轮运行产生8720万个输出token,最终通过全部600万项验收测试,全部使用开源模型时,成本约为350美元(约合人民币2368元)

三,打造面向Agent的分布式文件系统AgentFS,部分性能达到EFS的626倍,并完成约190万个状态的形式化模型检查和约300项集成测试。

一、从理解意图到持续演进,包揽软件开发六个环节

Intent Lab称,Fleet的工作方式类似一支遵循工程原则的软件团队,整个开发流程包含理解、设计、协调、构建、验证和演进六个环节。

由于大多数项目都始于一个比较模糊的意图,Fleet会先与用户共同明确目标,将其转化为具体结果,并确定约束条件和验收标准。此后的全部工作都会围绕这些标准展开。

完成需求理解后,Fleet会权衡不同方案,确定符合要求的系统接口和架构,并持续记录每项决策会如何影响系统的其他部分。面对由多个组件组成的大型系统,它还会拆分任务、分配责任,并管理任务之间的依赖关系。

后续Fleet会一边实现系统,一边完善设计。当开发过程中出现新信息时,它会同步更新架构和代码,让设计方案与实际运行的系统保持一致。验证也会贯穿整个构建过程,Fleet会综合使用形式化证明、集成测试和运行时故障注入等方法,尽可能在代码仍在变化时发现问题。

软件投入生产后,Fleet的工作不会停止。它会继续观察系统的实际表现,并把使用情况、性能和成本等信息反馈到设计中,使得软件随着用户需求的变化持续改进。

二、GLM-5.2推理速度提升534%,达到647token/s

Intent Lab为Fleet设定的第一个任务,是重新设计英伟达大模型推理优化工具TensorRT-LLM的代码,让GLM-5.2在Grace Blackwell的计算节点上运行,并自主寻找、实现和验证优化方案。

由于TRT-LLM本身已经经过大量性能优化,想进一步提速并不容易。Fleet最终从内核、运行时、通信和推测解码四个方面入手。

内核层面,Fleet通过内核融合和Agent生成的PTX、SASS代码减少内核启动,推理性能提升24%;在运行时层面,利用H2D批处理实现稳态解码零拷贝,使性能提升16%通信层面,将集合通信、残差相加和RMSNorm进行融合,使性能提升18%;在推测解码方面,加入DSpark,一次提出并验证多个候选token,将推理速度进一步提升约4倍。最终,端到端推理性能较原版TRT-LLM提升534%


▲内核、运行时、通信和推测解码性能提升情况(图源:Intent Lab)

整个优化过程由Fleet自主推进。系统先分析性能上限、识别瓶颈,再提出和验证优化方案。没有通过验证的方案会被放弃并重新尝试,通过验证的方案则会被保留,再进入下一轮优化。

测试结果显示,原版TensorRT-LLM运行GLM-5.2时的速度为102token/s,完成内核、运行时和通信优化后提升至161token/s,加入DSpark后达到647token/s,端到端性能提高534%


▲输出速度提升情况(图源:Intent Lab)

据Intent Lab称,这也是目前GLM-5.2所达到的最快推理速度。整个过程没有人工介入,都是由Fleet端到端完成。

三、一条指令从头构建数据库,产生8720万个输出token

Fleet的第二个任务,是构建一个与现有系统兼容、但内部架构完全从头设计的新系统

系统现代化并不是简单修改旧代码,而是在保持外部行为不变的情况下重新设计内部架构。在这个任务中,Fleet没有参考SQLite的现有代码和文档,而是把SQLite测试集作为验收标准。

Intent Lab只提供了一条指令:“构建一个与SQLite兼容的SQL数据库引擎,使其能够通过全部sqllogictest测试用例,性能达到或超过SQLite。”

Fleet将工作分给决策、架构设计、编码、测试、审查和质量保障等不同角色。各角色在整个过程中反复协作,随着代码变化持续调整设计、进行测试和审查。

整轮运行共产生8720万个输出token。其中,编码占38.6%,测试占21.7%,决策和架构设计分别占17.8%和13.3%,审查与质量保障合计占8.6%。这意味着,构建数据库并不只是生成代码,大量工作也被用于设计、决策和验证。


▲Fleet的输出token分布(图源:Intent Lab)

Fleet仅根据一行提示词就完成了数据库现代化改造,从头设计并验证系统,最终通过全部600万项验收测试

同一套Fleet可以使用不同模型完成任务。使用Opus 4.8时,整轮运行成本约为2000美元(约合人民币13532元);全部使用开源模型时,成本约为350美元(约合人民币2368元)

四、从头构建分布式文件系统,目录查询速度达到626倍

Fleet的第三个任务,是在云环境中构建一个针对Agent使用方式优化的分布式文件系统,并严格检查其正确性和容错能力。

Agent会频繁创建沙箱、扫描目录,并在共享云存储中处理大量小文件。Intent Lab尝试了亚马逊EFS和S3FS等现成方案,但这些产品在Agent工作负载下均存在限制,因此Fleet从头构建了AgentFS。

在mdtest测试中,AgentFS执行目录和文件创建操作的速度为EFS的45倍,文件读取速度为EFS的30倍。在Agent经常使用的状态查询操作中,其优势更加明显:目录状态查询速度达到EFS的626倍,文件状态查询速度达到EFS的625倍


▲mdtest测试结果(图源:Intent Lab)

在Git代码库测试中,AgentFS克隆代码库的速度约为EFS的2.5倍至3倍,查询代码库状态的速度约为6.9倍至9.5倍,删除代码库的速度约为13倍至14倍。测试分别使用etcd和Kubernetes作为小型与大型代码库。S3FS未能完整检出Kubernetes代码库,因此只获得了部分结果。


▲Git代码库测试结果(图源:Intent Lab)

除了性能,AgentFS还接受了严格验证。Fleet检查了31个模型中的约190万个可达状态,覆盖不同的并发顺序、系统崩溃和竞争情况。AgentFS还完成了约300项集成测试,以及故障注入和模糊测试。

验证过程中,Fleet发现了一处由编程Agent引入的Bug,该问题可能导致分布式创建和删除操作出现数据损坏。修复并重新验证后,系统中的损坏状态被消除。

结语:从“AI写代码”走向“AI造系统”

Intent Lab尝试让多个Agent组成一支具备不同分工的自主工程团队。从推理引擎优化、数据库重建到分布式文件系统创建,Fleet需要自己设计方案、协调任务、完成开发并验证结果。这意味着AI编程正在尝试跨过单纯的代码生成环节,进一步进入完整的软件工程流程。

不过,目前这些仍是Intent Lab公布的早期成果。自主AI团队能否稳定处理更复杂的真实项目,并以可接受的成本长期运行,还需要更多实践验证。

来源:Intent Lab、X

特别声明:以上内容(如有图片或视频亦包括在内)为自媒体平台“网易号”用户上传并发布,本平台仅提供信息存储服务。

Notice: The content above (including the pictures and videos if any) is uploaded and posted by a user of NetEase Hao, which is a social media platform and only provides information storage services.

相关推荐
热点推荐
刘国梁到底有多狠?弃用郝帅和陈玘,用天才前途换国乒的万无一失

刘国梁到底有多狠?弃用郝帅和陈玘,用天才前途换国乒的万无一失

老玮是个手艺人
2026-03-27 14:46:10
大势已定!再过一年,退休人员必须直面的3个养老真相

大势已定!再过一年,退休人员必须直面的3个养老真相

糖逗在娱乐
2026-07-29 09:03:47
75岁TVB金牌监制梁材远离世,退休仅6年,马浚伟悼念两人合作无间

75岁TVB金牌监制梁材远离世,退休仅6年,马浚伟悼念两人合作无间

树娃
2026-07-30 09:36:55
CBA最新消息!莫兰德或加盟北京首钢,上海男篮外援大换血

CBA最新消息!莫兰德或加盟北京首钢,上海男篮外援大换血

体坛瞎白话
2026-07-29 08:14:16
杨尚昆晚年病重,多次嘱咐身边人:一定不要让刘少奇儿子刘源知晓

杨尚昆晚年病重,多次嘱咐身边人:一定不要让刘少奇儿子刘源知晓

兵卒史
2026-06-28 07:17:02
贵州1岁女童熟睡中,被隔壁3岁男孩9次拿被褥捂头,妈妈查看监控直呼后怕:听到哭声下楼时,男孩才慌忙逃走;男孩家长:会对孩子进行教育

贵州1岁女童熟睡中,被隔壁3岁男孩9次拿被褥捂头,妈妈查看监控直呼后怕:听到哭声下楼时,男孩才慌忙逃走;男孩家长:会对孩子进行教育

大风新闻
2026-07-29 19:50:03
写给王小姐

写给王小姐

吴应
2026-07-29 12:28:09
小米,这是来砸场子...

小米,这是来砸场子...

放毒
2026-07-28 17:52:18
人口告别世界第一?催生“二孩”无效后,国家终于向住房出手了!

人口告别世界第一?催生“二孩”无效后,国家终于向住房出手了!

混沌录
2026-05-30 23:41:14
不要把极右翼标签强行加在马斯克、德国魏德尔、英国法拉奇身上,他们不过是大声说出了常识

不要把极右翼标签强行加在马斯克、德国魏德尔、英国法拉奇身上,他们不过是大声说出了常识

壹家言
2026-07-29 07:52:50
终于真相大白!张柏芝三胎生父身份曝光,原来早有迹象

终于真相大白!张柏芝三胎生父身份曝光,原来早有迹象

青梅侃史啊
2026-07-29 07:04:13
1天4个瓜!国外生子、被抓进去、自曝怀双胎、韩红最让人意外

1天4个瓜!国外生子、被抓进去、自曝怀双胎、韩红最让人意外

三石记
2026-06-25 11:54:09
曾是上海著名主持,出身名门,与曹可凡关系不一般,如今却已转行

曾是上海著名主持,出身名门,与曹可凡关系不一般,如今却已转行

洲洲影视娱评
2026-07-27 14:59:42
田启文告别体面痛诉周星驰:我对他掏心掏肺,他跟我算到分毫不差

田启文告别体面痛诉周星驰:我对他掏心掏肺,他跟我算到分毫不差

橙星文娱
2026-07-29 13:22:41
姓氏太稀有是种什么体验?网友:自己的名字找老婆时一语成谶

姓氏太稀有是种什么体验?网友:自己的名字找老婆时一语成谶

另子维爱读史
2026-07-29 21:30:50
29日晚间国乒新消息!传来2好消息1坏消息,孙颖莎 秦志戬 姚睿轩

29日晚间国乒新消息!传来2好消息1坏消息,孙颖莎 秦志戬 姚睿轩

童叔不飙车
2026-07-29 22:34:23
“冷静星期五”又火了,肯德基却越来越不像卖炸鸡的

“冷静星期五”又火了,肯德基却越来越不像卖炸鸡的

金角财经
2026-07-29 15:42:21
年薪70万、只上半年班!法国给王虹的顶级待遇,藏着最精明的科研布局

年薪70万、只上半年班!法国给王虹的顶级待遇,藏着最精明的科研布局

墨策史
2026-07-28 20:19:50
伊朗球员世界杯奖金仅有7780美元,这事即使中国足协也干不出来

伊朗球员世界杯奖金仅有7780美元,这事即使中国足协也干不出来

姜大叔侃球
2026-07-29 15:57:04
宣布交易!总冠军3D后卫!二次重磅联手詹姆斯

宣布交易!总冠军3D后卫!二次重磅联手詹姆斯

篮球实战宝典
2026-07-29 16:39:12
2026-07-30 10:03:00
智东西 incentive-icons
智东西
智东西,AI产业新媒体,专注报道人工智能的前沿技术发展,和技术应用带来的千行百业产业变革。
12347文章数 117143关注度
往期回顾 全部

科技要闻

翁荔回归OpenAI,研究"用模型开发模型"

头条要闻

靠学费减免吸引生源 福州一民办高中成立仅3年就停办

头条要闻

靠学费减免吸引生源 福州一民办高中成立仅3年就停办

体育要闻

毫无存在感的NBA状元,最先谢谢惠顾?

娱乐要闻

55岁影帝黄政民出轨

财经要闻

美联储维持利率不变 三位委员投下加息票

汽车要闻

MG 07预售12.59万起 高阶版配激光雷达+CDC

态度原创

亲子
游戏
数码
本地
公开课

亲子要闻

一个晒外甥女,笑不活了

《漫威金刚狼》启动界面泄露 试玩前瞻8月13日解禁

数码要闻

暑期游戏装机7系CPU哪家强?锐龙7 9700X用高性价比制霸全场

本地新闻

中国少年手球队共建揭牌暨中匈女手巅峰赛

公开课

李玫瑾:为什么性格比能力更重要?

无障碍浏览 进入关怀版