网易首页 > 网易科技 > 网易科技 > 正文

国产算力从单点性能走向系统协同:星流计算 NovuWing 跑通多 Agent 新架构

0
分享至

(原标题:国产算力从单点性能走向系统协同:星流计算 NovuWing 跑通多 Agent 新架构)

2026年8月7日,企业级全栈 AI 基础设施公司星流计算(NovuInfra)正式发布《Agent Native Compute:面向企业 Agent 时代的新一代 AI 计算基础设施》白皮书,系统披露 NovuWing™ 技术架构。目前,ShareKV 双组件已跑通:KV Cache 命中率超80%,中位 TTFT 降至基线20% 以下。

它关注的不是如何再提升一次模型推理的峰值性能,而是一个更现实的问题:当企业同时运行几十个、上百个 Agent,如何让它们长期保持上下文、频繁唤醒与协同,又不让 GPU、HBM 和整体成本失控?

从“计算墙”走向“内存墙”

Agent 在 Active、Idle、Deep-Idle 和 Recovering 等状态之间不断切换,并持续保存上下文、KV Cache 与可恢复运行状态。若这些数据长期驻留 HBM,昂贵的高带宽资源会被低活跃状态占用;若直接释放,Agent 再次唤醒时又要重新计算。为此,NovuWing™ 构建三级智能内存:L0 HBM 承载活跃 KV Cache;L1 DDR 保存短期闲置、可能快速复用的状态;L1.5 CXL.mem / NVMe 承载低活跃 KV Cache、上下文快照与暂停 Agent 状态。数据随生命周期分层流动,Agent 激活时再按需预取和恢复。

关键不只是分层,而是理解 Agent

传统缓存调度通常依据访问热度或显存压力。NovuWing™ 进一步引入 Agent 语义:系统判断数据属于哪个 Agent 与 Session、当前处于什么状态,以及迁移、加载或重算的恢复成本。Agent Runtime 通过 agent-id、session-id 与 tier hint 把策略传递给推理框架和内存体系,使缓存管理从“显存不够再换出”转向“依据 Agent 状态主动迁移与预取”。

为把这套机制落到工程系统,星流计算自主开发 ShareKVConnector 与 ShareKVSidecar。前者运行在 vLLM 推理实例侧,衔接 GPU/HBM 与 L1+L1.5共享内存,并执行 KV Cache 迁移、预取与恢复;后者作为宿主机共享服务,统一管理 DDR 共享内存池与 CXL.mem(或 NVMe)池,为多个推理实例提供共享 KV 服务。两者通过共享内存和异步 I/O 建立 HBM、DDR、CXL.mem(或NVMe)之间的数据通路,减少额外拷贝与迁移开销。

阶段性基线结果进一步验证了这条技术路径:在当前企业 Agent 场景测试中,KV Cache 命中率超过80%,中位首 Token 时延(TTFT)降至基线的20% 以下。前者减少了可复用上下文的重复计算,后者直接缩短首 Token 等待时间,表明 Agent 语义调度与 ShareKV 分层机制已开始转化为可感知的效率收益。

从白皮书到产品:关键链路跑通,效率收益开始显现

目前,相关能力已在玄矩™ A1与 SerpMind™ 产品体系中完成贯通。玄矩 A1提供计算与三级内存底座,Agent Runtime 负责生命周期和资源调度,SerpMind Enterprise Agent OS 提供 Agent 的创建、运行与治理。围绕核心机制,星流计算已提交发明专利申请《基于 Agent 语义的三级分层 KV 缓存智能调度方法及系统》,申请号:202611065591.X。

让算力从“可用”走向“经济可用”

星流计算将这一逻辑称为算力经济学:企业不应只比较峰值 FLOPS 和采购价格,还要考察 Agent Throughput、KV Cache 效率、Cost per Agent、Cost per Task 与 TCO。把带宽留给 HBM、把容量放到更合适的层级,再由 Agent 语义决定数据何时流动,本质上是让每一份昂贵算力投入承载更多有效智能。

对国产算力而言,这意味着创新正从芯片、板卡和服务器的单点性能,扩展到 CPU、GPU、内存、推理框架与 Runtime 的系统级协同。只有“算得起、跑得久、管得住”,多 Agent 才能真正进入企业生产。上述两项数据为当前企业 Agent 场景的阶段性基线结果;完整模型、上下文长度、并发规模、硬件配置及标准化 Benchmark 与 TCO 数据,将在完成可重复验证后独立发布。

相关推荐
热点推荐
2 亿顶薪每月只付 3222 美元抚养费!爱德华兹这官司赢得太漂亮

2 亿顶薪每月只付 3222 美元抚养费!爱德华兹这官司赢得太漂亮

情感大头说说
2026-07-23 13:26:05
瞒不住了!国家在广东布下惊天大局,广东真正王牌正在悄悄崛起!

瞒不住了!国家在广东布下惊天大局,广东真正王牌正在悄悄崛起!

丁懰惊悚影视解说
2026-08-12 14:13:10
55年授衔,得知自己军衔后,张广才给总政写信:是不是搞错了?

55年授衔,得知自己军衔后,张广才给总政写信:是不是搞错了?

梨花头
2026-08-12 11:11:33
男子阴茎癌晚期,夫妻生活一向干净,妻子:他就是改不了这个习惯

男子阴茎癌晚期,夫妻生活一向干净,妻子:他就是改不了这个习惯

健康之光
2026-06-08 17:03:57
被韩国瑜怒斥辞职,傅崐萁最新发声明,国民党新人事任命

被韩国瑜怒斥辞职,傅崐萁最新发声明,国民党新人事任命

呼呼历史论
2026-08-12 05:20:39
中超资讯:申花绯闻教练已到上海 | 北京国安的魔鬼赛程 能拿几分

中超资讯:申花绯闻教练已到上海 | 北京国安的魔鬼赛程 能拿几分

80后体育大蜀黍
2026-08-12 23:31:23
煮虾不去线,有人嫌脏有人无所谓,老渔民却说出了实话!

煮虾不去线,有人嫌脏有人无所谓,老渔民却说出了实话!

娱乐圈见解说
2026-08-07 01:58:56
上半年在菲律宾共发生涉中国公民绑架案7起,绑匪为何如此心狠手辣?

上半年在菲律宾共发生涉中国公民绑架案7起,绑匪为何如此心狠手辣?

红星新闻
2026-08-12 20:15:32
德天空:加拉塔萨雷尚未与马丁内利就个人条款达成协议

德天空:加拉塔萨雷尚未与马丁内利就个人条款达成协议

懂球帝
2026-08-13 02:35:07
胖东来把全国房东都干懵了!

胖东来把全国房东都干懵了!

贩财局
2026-08-11 16:28:26
降价9万仍无人问津,库存超260万辆,经销商应该如何跳出死循环?

降价9万仍无人问津,库存超260万辆,经销商应该如何跳出死循环?

阿振观点
2026-08-11 06:02:54
真是没想到!8月12日凌晨中国女篮传来3大主力,李梦、韩旭、张子宇最新消息!宫鲁鸣压力大

真是没想到!8月12日凌晨中国女篮传来3大主力,李梦、韩旭、张子宇最新消息!宫鲁鸣压力大

小七说篮球
2026-08-12 09:44:04
50天狂卖5500万瓶!三得利罪恶碳酸饮料,被自律人买疯了

50天狂卖5500万瓶!三得利罪恶碳酸饮料,被自律人买疯了

Foodaily每日食品
2026-08-12 08:15:56
95年妻子去世后,丈母娘把妻姐许给我,新婚夜我才知道赚大了

95年妻子去世后,丈母娘把妻姐许给我,新婚夜我才知道赚大了

千秋文化
2026-06-11 18:00:17
现场直击|台风“白海豚”致强降雨 多地积极应对

现场直击|台风“白海豚”致强降雨 多地积极应对

新华社
2026-08-12 00:38:24
赵姝丹同志任中共成都市温江区委副书记

赵姝丹同志任中共成都市温江区委副书记

爱看头条
2026-08-12 16:16:02
中国最奇怪的现象:亲家和亲家,基本不联系!看透后,全是智慧

中国最奇怪的现象:亲家和亲家,基本不联系!看透后,全是智慧

来去自如的小章
2026-08-04 01:37:40
悬案告破!香港“霞姐”遭多名男子乱刀砍杀,幕后真凶曝光......

悬案告破!香港“霞姐”遭多名男子乱刀砍杀,幕后真凶曝光......

港漂圈
2026-08-12 21:23:58
6岁女孩因顶嘴被父亲活活打死,临走遗言:"爸爸,我起不来了"

6岁女孩因顶嘴被父亲活活打死,临走遗言:"爸爸,我起不来了"

枕边聊育儿
2026-08-09 08:54:25
广东队重磅出手,新赛季第一签约,球迷怒喷,没有朱芳雨真不行

广东队重磅出手,新赛季第一签约,球迷怒喷,没有朱芳雨真不行

宗介说体育
2026-08-12 13:54:32
2026-08-13 03:24:49

科技要闻

Manus第二季,浪子回头

头条要闻

冲上热搜:银行能办结婚证了

头条要闻

冲上热搜:银行能办结婚证了

体育要闻

杜兰特,所谓的“联盟小王”

娱乐要闻

老戏骨杨昆两夺金鹰奖,因物业费被告

财经要闻

华尔街把AI算力炒成下一个房地产?

汽车要闻

全系600km续航/空间表现出色 奇瑞风云T7预售10.99万起

态度原创

本地
家居
艺术
教育
数码

本地新闻

黄州一夜,苏轼写给普通人的月光

家居要闻

2026建博会(广州) 公装联探展交流活动

艺术要闻

工笔的魂,写意的骨!这位画家把两者一融,画中人美得惊心动魄!

教育要闻

教老师们把背的词写成一道题。

数码要闻

Google推出Pixel Watch 5智能手表

无障碍浏览 进入关怀版
×