网易首页 > 网易号 > 正文 申请入驻

万亿Token日产能背后:GPU成本被砍90%

0
分享至


AI行业正在经历一场静默的转向——从"谁家的模型参数更大"变成"谁能用更少的电、更便宜的卡,吐出更多Token"。

郑纬民院士把2026年称为"Token爆发元年"。智能体、AI Coding这些应用一旦跑起来,Token消耗量不是翻倍,是百倍千倍地跳。问题是:用户端单日成本能飙到千元,供给端却在亏钱运营,大量智算资源躺在机房里睡大觉。

趋境科技在中关村论坛发布的ATaaS平台,瞄准的就是这个结构性尴尬。它不想让你再买更多卡,而是让已有的卡别那么闲。


平台的核心逻辑可以拆成三块:全系统异构协同、"以存换算"、面向SLO的智能调度。翻译成大白话——别让GPU一个人扛所有活,CPU、内存、SSD都得动起来;把算过的结果存好,下次直接调用,别重复造轮子;用户的业务需求能精准翻译成底层资源怎么分配。

具体落地时,趋境掏出了四张技术牌。"六合"异构推理2.0让CPU和GPU、国产和非国产算力混搭干活,万卡集群运营成本能压降20%以上。"月饼"以存换算2.0把KV Cache缓存空间扩到百倍千倍,缓存命中率最高90%,直接砍掉90%的GPU算力开销。"双仪"做算力资源的预规划和动态调优,"万象"则负责万亿参数模型7秒极速拉起、数百节点弹性调度。

生态层面的动作同样关键。华为昇腾那边,部分项目性能提升2倍以上;并行科技把特定场景集群性能抬升50%,服务智谱、Kimi、MiniMax、DeepSeek这些头部客户;京东云也联手推推理引擎,共建Mooncake开源生态。


九源联合体提了一个尖锐观察:国产卡现在缺的不是性能,是"生态驱动"。换句话说,硬件造出来没人用、不会用、不好用,才是真的卡脖子。

趋境ATaaS的落地,某种程度上是在回答这个问题——AI基础设施的竞争力,正从"数据中心"转向"Token工厂"。不是比谁的机房更气派,而是比谁能把每度电、每张卡,稳定地转化为可衡量的Token产出。

一位参与内测的集群运营负责人反馈,过去万卡集群的综合利用率"能到20%就不错了",现在终于敢往50%以上看了。

特别声明:以上内容(如有图片或视频亦包括在内)为自媒体平台“网易号”用户上传并发布,本平台仅提供信息存储服务。

Notice: The content above (including the pictures and videos if any) is uploaded and posted by a user of NetEase Hao, which is a social media platform and only provides information storage services.

相关推荐
热点推荐
初中学历的湖南修车工,造了台吊打雅马哈的国产赛车。

初中学历的湖南修车工,造了台吊打雅马哈的国产赛车。

差评XPIN
2026-03-31 00:12:40
张雪峰遗产分配有眉目!公司总经理发文承诺,张姩菡长大后会接班

张雪峰遗产分配有眉目!公司总经理发文承诺,张姩菡长大后会接班

阅毒君
2026-03-31 10:30:33
郑丽文访问大陆,又获得一国民党要员支持,比蒋万安赵少康更给力

郑丽文访问大陆,又获得一国民党要员支持,比蒋万安赵少康更给力

小陆搞笑日常
2026-03-31 12:06:16
1颗就定罪!2020年上海男子花6800买1颗“鹤顶红”,1年后被查获

1颗就定罪!2020年上海男子花6800买1颗“鹤顶红”,1年后被查获

潮鹿逐梦
2026-03-31 08:27:59
陪玩陪睡仅是冰山一角,李荣浩手撕单依纯后,更大的黑幕被曝出

陪玩陪睡仅是冰山一角,李荣浩手撕单依纯后,更大的黑幕被曝出

情感大头说说
2026-03-30 15:37:33
1死2伤!陕西西安一出租车与轿车相撞,死伤者身份披露,画面曝光

1死2伤!陕西西安一出租车与轿车相撞,死伤者身份披露,画面曝光

老猫观点
2026-03-31 09:08:30
遗产争议仅三天,75岁刘晓庆就宣布了新的好消息

遗产争议仅三天,75岁刘晓庆就宣布了新的好消息

手工制作阿歼
2026-03-31 06:48:11
错用中国照片,苏格兰撤除宣传材料

错用中国照片,苏格兰撤除宣传材料

观察者网
2026-03-31 13:06:13
我爸是市委书记,我对女友说我爸是工人,结果她和副镇长好上了

我爸是市委书记,我对女友说我爸是工人,结果她和副镇长好上了

乔生桂
2025-08-17 08:15:03
我国成品汽油价格,和国际油价渐行渐远

我国成品汽油价格,和国际油价渐行渐远

安安小小姐姐
2026-03-20 06:35:03
退休人员速看!国办9号和人社28号文件,养老待遇如何自查才对?

退休人员速看!国办9号和人社28号文件,养老待遇如何自查才对?

小谈食刻美食
2026-03-31 08:24:04
美说中国有1300枚中程导弹,伊朗一月就打出1800枚,笑而不语了

美说中国有1300枚中程导弹,伊朗一月就打出1800枚,笑而不语了

世家宝
2026-03-30 17:35:12
惊讶!伊朗大捷!用一场标志性大胜,让美军创下战后最大战损记录

惊讶!伊朗大捷!用一场标志性大胜,让美军创下战后最大战损记录

军机Talk
2026-03-30 11:02:14
印度发出最后警告:化肥不放行或致饥荒,14亿人饭碗成危机

印度发出最后警告:化肥不放行或致饥荒,14亿人饭碗成危机

阅微札记
2026-03-31 12:03:00
几乎都是假货!利润高达2400%,为什么消费者前赴后继争相购买

几乎都是假货!利润高达2400%,为什么消费者前赴后继争相购买

混沌录
2026-03-31 15:08:04
2026年,首个特级建设集团破产!

2026年,首个特级建设集团破产!

新浪财经
2026-03-24 20:02:40
午盘|不装了!A股大跳水!发生什么了?

午盘|不装了!A股大跳水!发生什么了?

龙行天下虎
2026-03-31 11:26:23
住院时女儿只来1次,出院当天女儿来接我:爸,给我58万我换辆车

住院时女儿只来1次,出院当天女儿来接我:爸,给我58万我换辆车

纸鸢奇谭
2026-03-31 10:40:50
美股芯片股全线重挫,美光科技跌近10%,房地产巨头狂飙51%,原油大涨3%

美股芯片股全线重挫,美光科技跌近10%,房地产巨头狂飙51%,原油大涨3%

21世纪经济报道
2026-03-31 07:19:44
武汉警方通报一起持刀伤人案:嫌疑人已被控制,4名伤者已全部送医救治

武汉警方通报一起持刀伤人案:嫌疑人已被控制,4名伤者已全部送医救治

环球网资讯
2026-03-31 11:58:09
2026-03-31 15:44:49
摸鱼算法
摸鱼算法
致力于用最前沿的AI技术,换取更多发呆时间的三十岁青年。
516文章数 3关注度
往期回顾 全部

科技要闻

尚未正式宣发,国行苹果AI半夜"意外闪现"

头条要闻

美用超900公斤钻地弹袭击伊弹药库 以总理:行动"过半"

头条要闻

美用超900公斤钻地弹袭击伊弹药库 以总理:行动"过半"

体育要闻

县城修车工,用20年成为世界冠军

娱乐要闻

丝芭传媒举报鞠婧祎:瞒报收入竟达85%

财经要闻

高薪内推藏陷阱!"招转培"骗局盯上求职者

汽车要闻

16万级最强2.0T 全新一代瑞虎9来了

态度原创

亲子
教育
数码
公开课
军事航空

亲子要闻

女儿4岁生日,带她去海底捞过生日,把小宝宝开心坏了

教育要闻

议论中小学春秋假

数码要闻

AMD第6代霄龙处理器曝光:192核主频突破4GHz

公开课

李玫瑾:为什么性格比能力更重要?

军事要闻

特朗普:即使霍尔木兹海峡仍关闭 也愿意结束战争

无障碍浏览 进入关怀版