网易首页 > 网易号 > 正文 申请入驻

趋境科技发布高效能AI Token生产服务平台,日均万亿Token产能

0
分享至


英伟达CEO黄仁勋日前提出一个观点:现在的AI计算机变成了“工厂”,并直接与企业的收入创造挂钩。他认为,AI代工厂正在制造一种名为“Token”的商品,且这种商品已经被细分和定价。

在日前由趋境科技与九源智能计算系统生态联合体共同主办的“全栈智能全域推理:Token爆发元年的全场景大规模推理服务”专题研讨会上,中国工程院院士、九源智能计算系统生态联合体理事长、清华大学教授、趋境科技首席科学顾问郑纬民提出,随着智能体、AI Coding等应用的爆发式增长,Token消耗量呈百倍、千倍级跃升,2026年已成为名副其实的“Token爆发元年”。AI产业的核心关注焦点,正从“模型参数规模、模型可用性”全面转向“稳定、低成本、高质量交付的Token产能”。

Token即服务

“未来的智能基础设施应围绕‘Token即服务(TaaS,Token as a Service)’进行重构”。郑纬民院士表示,传统模型服务的核心是保障模型可得性与接口完整性,而Token服务的核心是保障Token产能的可用性,更关注成本、吞吐、延迟与可靠性等生产性指标,是一个极端复杂的多维系统最优化问题,必须完成全链路的系统级创新。


郑纬民院士明确了TaaS发展的三大核心技术底座:一是全系统异构协同,通过将不同计算任务合理分配至GPU、CPU、内存和SSD,打破算力瓶颈;二是存算协同实现“以存换算”,通过前置KV Cache等技术,大幅降低重复计算量,提升推理效率;三是面向SLO的智能调度,精准地将用户业务需求“翻译”为底层资源决策。郑院士表示:“只有让智能生成像水电一样被稳定地调度与供给,才能真正迎来算力制造Token为王的普惠智能时代。”

四大核心技术

趋境科技在论坛上发布趋境ATaaS高效能AI Token生产服务平台,可支撑万级别AI推理需求,并达到日均万亿级别Token整体产能。

趋境ATaaS具备四大自研核心技术:全球首创大模型计算逻辑重构技术,深度融合CPU+GPU、国产与非国产算力,实现任务的智能分流,可将万卡级智算集群运营成本压降20%以上;全球首创超体量KV Cache缓存技术,将KV Cache存储空间扩展百倍至千倍,缓存命中率最高可达90%,直接削减90%的GPU算力开销;全球首创算子级SLO仿真技术,实现算力资源的智能预规划与动态调优,可精准切分异构算力,将万卡级智算集群硬件综合资源利用率最高提升数倍;支持万亿参数大模型7秒快速拉起与动态配置变更、数百节点超大规模EP弹性调度,为万卡级高性能横向扩展提供关键能力。

趋境ATaaS平台使每单位算力和能耗投入都能够数倍转化为更稳定、更可衡量的Token价值产出,推动算力基础设施从“数据中心”向“Token工厂”全面演进。

打造产业服务生态

该论坛是2026中关村论坛核心组成部分,论坛汇聚院士、顶尖学者及产业领军人物,聚焦大模型时代推理服务的核心技术、产业实践和生态协同,共探高效、稳定、安全、普惠的大模型推理服务体系建设。

并行科技作为国内领先的算力服务商,在第三方算力服务领域位列第一,并行科技董事长陈健表示,其MaaS服务得到趋境科技的大力支持,双方合作将高质量Token的生产成本大幅优化,并将特定场景下的集群性能提升50%,共同为智谱、Kimi、MiniMax、DeepSeek等头部大模型客户提供优质服务。


九源智能计算系统生态联合体副秘书长王豪杰表示,T九源联合体打造国产智能计算生态,全国产化方案适配多款GPU、串行代码高效并行的九源领域编程语言“九齿”、支撑Mooncake推理加速系统、基于国产芯片的高效智能体,并与KTransformers等框架深度联动,推动国产算力从“可用”迈向“好用”。

京东云AI Infra产品负责人郝鹏表示,京东云已与趋境科技达成深度合作,联合打造下一代推理引擎,共同赋能Mooncake开源生态。华为昇腾计算业务副总裁、首席产品规划师叶耀荣表示,趋境与昇腾展开了全方位的技术和商业化合作,部分项目在昇腾AI集群上实现了2倍以上性能提升。此外,阿里云政企事业部教育科研解决方案总监杨坤、商汤科技大装置首席架构师项铁尧等也分享了与趋境科技在Mooncake等开源项目上深度合作,以及为趋境Token服务提供高可靠算力支持的实践。

特别声明:以上内容(如有图片或视频亦包括在内)为自媒体平台“网易号”用户上传并发布,本平台仅提供信息存储服务。

Notice: The content above (including the pictures and videos if any) is uploaded and posted by a user of NetEase Hao, which is a social media platform and only provides information storage services.

相关推荐
热点推荐
马斯克有句话点醒过我“如果今天我破产了,绝对不会去找工作,而是去做一件能快速产生现金流,并且可以复制放大的事。”

马斯克有句话点醒过我“如果今天我破产了,绝对不会去找工作,而是去做一件能快速产生现金流,并且可以复制放大的事。”

LULU生活家
2026-07-07 20:59:47
粟裕全歼敌军却找不到敌师长,俘虏指着我军干部:他的鞋是师长的

粟裕全歼敌军却找不到敌师长,俘虏指着我军干部:他的鞋是师长的

芳芳历史烩
2026-07-14 04:11:05
江苏一厅级干部任上被查!

江苏一厅级干部任上被查!

兴化论坛
2026-07-15 17:54:02
NBA夏联综述:李贤重22分创新高 榜眼秀状态低迷

NBA夏联综述:李贤重22分创新高 榜眼秀状态低迷

体坛周报
2026-07-16 12:24:24
美国再次攻击伊朗;本要达成协议,特朗普:这些人,他们脑袋有问题

美国再次攻击伊朗;本要达成协议,特朗普:这些人,他们脑袋有问题

一种观点
2026-07-13 09:02:34
北京“最火驻京办”开分店?本周正式开业,选址石景山!有人称“加盟”,网友晒:性价比高

北京“最火驻京办”开分店?本周正式开业,选址石景山!有人称“加盟”,网友晒:性价比高

北京商报
2026-07-15 14:12:14
退休老友请客,专点贵酒和海鲜。我借口离席,半小时后他电话追来

退休老友请客,专点贵酒和海鲜。我借口离席,半小时后他电话追来

麦子情感故事
2026-07-15 22:18:24
官宣!14年老将!生涯落幕!万分先生离开了!

官宣!14年老将!生涯落幕!万分先生离开了!

篮球盛世
2026-07-16 12:34:09
改革开放后,陈云为什么没有担任主席、总理的职务

改革开放后,陈云为什么没有担任主席、总理的职务

【历史客栈】
2026-07-16 10:00:24
不废话就是干 新版《生化危机》电影片长仅95分钟

不废话就是干 新版《生化危机》电影片长仅95分钟

3DM游戏
2026-07-16 09:36:22
发生性关系,是女人吃亏了吗?

发生性关系,是女人吃亏了吗?

那年秋天
2026-07-12 11:49:12
那年,杨超越还是个厂妹,在厂里啃馒头

那年,杨超越还是个厂妹,在厂里啃馒头

微微热评
2026-07-08 23:03:27
蒋介石临终前告诉蒋经国:我这一生只敬佩一人,畏惧两人!

蒋介石临终前告诉蒋经国:我这一生只敬佩一人,畏惧两人!

浩渺青史
2026-07-15 17:49:44
九年相守终圆满,C罗爆款椭圆钻戒出圈!

九年相守终圆满,C罗爆款椭圆钻戒出圈!

麦桐看娱乐
2026-07-15 22:56:06
你的家乡有哪些难以启齿的习俗。看网友讲述,这都是人神共愤啊。

你的家乡有哪些难以启齿的习俗。看网友讲述,这都是人神共愤啊。

侃神评故事
2026-07-09 15:46:42
1天4个瓜!国外生子、被抓进去、自曝怀双胎、韩红最让人意外

1天4个瓜!国外生子、被抓进去、自曝怀双胎、韩红最让人意外

三石记
2026-06-25 11:54:09
22字威胁?菲律宾弹劾案现离奇转折,马科斯发话:必须严查!

22字威胁?菲律宾弹劾案现离奇转折,马科斯发话:必须严查!

热恋到老
2026-07-16 10:47:38
这就是信仰的胜利

这就是信仰的胜利

有马体育
2026-07-16 08:42:38
长鑫科技造富神话:“长岗CBD”崛起,酒店常被供应商订完,小贩见工牌涨价成段子

长鑫科技造富神话:“长岗CBD”崛起,酒店常被供应商订完,小贩见工牌涨价成段子

红星资本局
2026-07-15 15:32:59
硬任务之下,纸上种田:《焦点访谈》是不是太苛责农民和基层干部了?

硬任务之下,纸上种田:《焦点访谈》是不是太苛责农民和基层干部了?

呦呦鹿鸣
2026-07-15 20:19:05
2026-07-16 13:59:00
文汇报 incentive-icons
文汇报
华语世界高品质人文阅读平台
283499文章数 310163关注度
往期回顾 全部

科技要闻

SpaceX一度跌破发行价,较高点回落约40%

头条要闻

德国主持人节目中脱口而出辱华词语“ching chong”

头条要闻

德国主持人节目中脱口而出辱华词语“ching chong”

体育要闻

逆天6后卫神阵,图赫尔活活坑死英格兰

娱乐要闻

黄晓明回应赈灾车辆发生交通意外

财经要闻

长鑫科技批量造富:8名高管身家过亿

汽车要闻

零百加速1.96秒 腾势Z国内预售价68万起/四季度上市

态度原创

亲子
艺术
数码
时尚
房产

亲子要闻

2026 入园准备:幼儿园午睡用什么睡袋

艺术要闻

赵培智 2026年油画作品集(29幅)

数码要闻

新U还没发就被背刺!AMD 7800X3D跌至299美元:比7700X3D更便宜

夏天穿白色,要怎么配?

房产要闻

海南中考又爆了,800分以上超2万人!

无障碍浏览 进入关怀版