网易首页 > 网易号 > 正文 申请入驻

趋境科技发布ATaaS:全球领先的高效能AI Token生产服务平台

0
分享至

当前,人工智能产业正从模型能力竞争逐步转向规模化应用竞争。应用形态也从单一问答扩展到多智能体协作、长链路推理和复合任务执行,这使得 Token 需求快速增长。与此同时,算力采购、部署和运行过程中的设备和能源成本持续攀升,导致算力投入与实际 Token 产出之间的不匹配问题日益突出。围绕 Token 推理效率开展系统优化,已成为推动产业持续发展的关键环节。

基于这一背景,近日,全球领先的高效能 AI Token 生产服务商趋境科技,正式发布全新一代 AI 推理平台 ——趋境 ATaaS 高效能 AI Token 生产服务平台(Approaching.AI Token as a Service)。破解大额硬件投入难以转化为优质 Token 产能、资源浪费与成本空耗突出的行业困境。

针对当前行业难题,趋境 ATaaS 平台依托四大自研核心技术模块,构建覆盖异构整合、智能调度、弹性扩容的全链路能力,并将算力与能源封装为分层、面向具体应用场景定制的高效能 Token 服务,为国产算力提质增效、破解异构算力孤岛、实现规模化降本增效,提供标杆级中国方案。

四大产业现状:揭秘硬件高投入≠高效 Token 产出

1、硬件负载分化:过度依赖 GPU,CPU、内存等资源闲置空耗

传统 Token 生成链路重度依赖 GPU,而 CPU、大容量内存、集群 SSD 及 IB 高速互联等昂贵资源长期利用率不足 10%,全系统硬件资源利用率不足 20%,造成智算集群规模化刚性成本巨额空耗。

2、软硬件迭代失衡:芯片硬件快速更新,配套软件生态适配滞后

硬件标称算力虽持续提升,但软件层在通信、访存和算子融合等方面优化不足,PD/PP/CP/DP 等分布式并行策略在复杂组合下稳定性有限,最终导致超 80% 理论算力难以充分利用。

3、算力配置失准:脱离业务 SLO 精细化调度,粗放盲配引发资源冗余损耗

当前集群算力配置难以依据不同推理业务在时延、吞吐和稳定性上的差异化要求,精准匹配 CPU、GPU、内存等异构资源。统一部署和粗放配额仍较常见,导致超过 50% 的算力资源被隐形浪费。

4、架构演进失衡:开源模块丰富,但拼接式集成难以支撑规模化生产

开源生态为大模型推理提供了丰富模块,但在大规模集群场景下,单靠组件拼接难以解决系统级协同问题。原生架构对 KV Cache、序列长度等模型态关键参数感知不足,易引发负载失衡,再叠加通信阻塞和服务波动等因素,系统扩展后常面临性能下降与运维复杂度上升,无法支持大规模高效能 Token 生产。

趋境 ATaaS,四大核心技术破局产业困境,重构 Token 生产效能曲线

趋境科技提供高效能Token的本质,是重构算力、电力与 Token 产量之间的效能曲线。ATaaS 不是简单的资源供给平台,而是效能放大器——用软件撬动数倍于当前的 Token 产能。

六合:异构推理 2.0|全球首创大模型计算逻辑重构技术

深度融合 CPU+GPU、国产与非国产算力异构 PD 分离等技术,重构模型计算逻辑,并基于算子与任务特征进行智能分流:CPU 承载低计算密度任务,国产算力卡处理高密度 Prefill,大显存显卡承载高访存 Decode。万卡级智算集群整体运营成本压降20%以上。

月饼:以存换算 2.0|全球首创超体量 KV Cache 缓存技术

通过架构重构,将原本依赖昂贵显存承载的 KV Cache 存储空间扩展百倍至千倍,形成近乎无限的缓存池资源,缓存命中率最高可达 90% ,直接削减 90% GPU 算力开销。

双仪:虚实同构|全球首创算子级 SLO 仿真

基于算子级精细仿真,推演大模型 Token 生成全链路的吞吐、时延与访存表现,实现算力资源的智能预规划与动态调优;围绕业务 SLO 分级需求,精准切分异构算力配额并隔离资源优先级,可将万卡级智算集群硬件综合资源利用率最高提升数倍。

万象:极致弹性|打通规模化量产最后壁垒

依托系统化工程能力,实现万亿参数大模型 7 秒快速拉起与动态配置变更、数百节点超大规模 EP 弹性调度,以及智能容灾重构和负载均衡,形成平台原生支持万卡级高性能横向扩展的关键能力。在落地初期,便推动某在线公司的AI业务实现千卡集群吞吐实现翻倍提升。

从“数据中心”到“Token工厂”

“趋境 ATaaS:高效能 AI Token 生产服务平台(Approaching.AI Token as a Service)”的发布,体现了 AI 基础设施发展重点的进一步演进。行业关注的焦点,正在从单纯的算力规模竞争,转向对 Token 生产效率的综合衡量,其中包括 Token 响应延时(TTFT)、Token 吞吐(TPS)以及资源利用效率等关键指标。

这一理念与当前的行业共识一致, 当黄仁勋宣布 NVIDIA 的1万亿美元需求预测,当 Token “供不应求”成为常态,算力基础设施正从“数据中心”演进为“Token 工厂”。

作为高效能 AI Token 生产服务商,趋境科技依托长期的团队积累和推理优化能力,推出趋境 ATaaS 平台的意义不仅在于拓展了推理基础设施的技术边界,更在于为 AI 基础设施的建设和运营提供了新的思路和行业标准:通过提升算力调度效率、优化推理过程、增强资源协同能力,使每单位算力和能耗投入都能够数倍转化为更稳定、更可衡量的 Token 价值产出。

转载来源:趋境科技

本文为量子位获授权转载,观点仅为原作者所有。

特别声明:以上内容(如有图片或视频亦包括在内)为自媒体平台“网易号”用户上传并发布,本平台仅提供信息存储服务。

Notice: The content above (including the pictures and videos if any) is uploaded and posted by a user of NetEase Hao, which is a social media platform and only provides information storage services.

相关推荐
热点推荐
当年一针疫苗没打的500万人,如今结局出人意料,太真实了!

当年一针疫苗没打的500万人,如今结局出人意料,太真实了!

坠入二次元的海洋
2026-09-11 00:35:48
号称水浒“小吕布”,曾击杀一位五虎将,最终遭梁山六将围攻战死!

号称水浒“小吕布”,曾击杀一位五虎将,最终遭梁山六将围攻战死!

历史龙元阁
2026-10-04 12:20:16
中际旭创的眼光还是太毒了

中际旭创的眼光还是太毒了

财报时间
2026-10-04 08:35:58
马斯克:成为强者的第一步——杀死内心所有的恐惧。你只活70年,归宿都是寂灭,怕什么

马斯克:成为强者的第一步——杀死内心所有的恐惧。你只活70年,归宿都是寂灭,怕什么

杏花烟雨江南的碧园
2026-08-30 16:15:03
韩国射箭神话破灭!女子反曲弓名古屋惨案,印度宣告崛起

韩国射箭神话破灭!女子反曲弓名古屋惨案,印度宣告崛起

体育妞世界
2026-10-04 00:35:04
半岛局势突然“失控”,韩国一改温和态度,强烈要求朝鲜公开道歉

半岛局势突然“失控”,韩国一改温和态度,强烈要求朝鲜公开道歉

观锐器
2026-10-01 16:04:18
决胜分后双拳指天!16岁孙心然创7纪录比肩小米辣 美媒:太厉害了

决胜分后双拳指天!16岁孙心然创7纪录比肩小米辣 美媒:太厉害了

颜小白的篮球梦
2026-10-03 20:41:17
笑死!北京会惩罚每一个过度规划的游客,网友:兵马俑都没你能走

笑死!北京会惩罚每一个过度规划的游客,网友:兵马俑都没你能走

夜深爱杂谈
2026-10-01 20:22:18
推平黄土高原,造五亿亩良田,斥万亿巨资造良田是否可行?

推平黄土高原,造五亿亩良田,斥万亿巨资造良田是否可行?

乌克兰小静
2026-10-04 07:43:43
21岁浙江姑娘亚运会拿5金2银,被韩国媒体追着问是不是混血

21岁浙江姑娘亚运会拿5金2银,被韩国媒体追着问是不是混血

有态度网友19ILam
2026-10-03 10:42:36
已满!已满!堵成深红!尽量不要开车去

已满!已满!堵成深红!尽量不要开车去

江南晚报
2026-10-04 13:25:10
温瑞博回应外界舆论:真心喜欢我们的人不会去攻击我们的球队

温瑞博回应外界舆论:真心喜欢我们的人不会去攻击我们的球队

懂球帝
2026-10-04 14:49:17
夫妻裸睡是什么体验?不用觉得难为情,坚持下来能收获5个好处

夫妻裸睡是什么体验?不用觉得难为情,坚持下来能收获5个好处

观星赏月
2026-10-04 16:03:02
张本美和也没料到,哥哥被曝丑闻才几天,自己又迎来“心腹大患”

张本美和也没料到,哥哥被曝丑闻才几天,自己又迎来“心腹大患”

晓銊就是我
2026-10-04 05:59:27
2013年1月27日夜晚,在北京西单,29岁的杨雪鸥驾驶男友新买的牧马人,停车三小时

2013年1月27日夜晚,在北京西单,29岁的杨雪鸥驾驶男友新买的牧马人,停车三小时

起喜电影
2026-10-04 10:57:07
震惊!有大学生提议室友上交全部生活费统一保管遭拒,发帖人不解之余,室友视作“舍敌”

震惊!有大学生提议室友上交全部生活费统一保管遭拒,发帖人不解之余,室友视作“舍敌”

火山詩话
2026-10-02 08:52:28
前英格兰国脚确认,性侵自己的是舞蹈教练,曾被打晕,已入狱服刑

前英格兰国脚确认,性侵自己的是舞蹈教练,曾被打晕,已入狱服刑

小金体坛大视野
2026-10-04 10:12:17
可乐再次被关注!医生发现:脂肪肝者喝可乐,不用多久或有6变化

可乐再次被关注!医生发现:脂肪肝者喝可乐,不用多久或有6变化

路医生健康科普
2026-08-20 07:30:10
卢宇光称俄军失守乌东重镇利曼!乌克兰持续向东挺进

卢宇光称俄军失守乌东重镇利曼!乌克兰持续向东挺进

项鹏飞
2026-10-03 20:11:28
社保挂靠:钱全部自己交,国家没少收钱,凭什么还违法?

社保挂靠:钱全部自己交,国家没少收钱,凭什么还违法?

你在偷看谁
2026-10-03 18:28:09
2026-10-04 17:27:00
量子位 incentive-icons
量子位
追踪人工智能动态
13436文章数 176575关注度
往期回顾 全部

科技要闻

苹果确认:iPhone 18 Pro Max有问题

头条要闻

中国运动员亚运夺银国庆回家掰苞米 经纪人回应

头条要闻

中国运动员亚运夺银国庆回家掰苞米 经纪人回应

体育要闻

“小将”吴曦,中国的莫德里奇

娱乐要闻

杨议没料到,郭德纲如今仍是一呼百应

财经要闻

OpenAI前安全部门员工:公司文化已崩坏

汽车要闻

方程豹9月热销破4万 首款皮卡鲨鱼将于四季度上市

态度原创

手机
时尚
旅游
数码
艺术

手机要闻

小米、vivo、OPPO新旗舰首销周数据出炉

伊姐十一热推:电视剧《余红旧事》;电视剧《不是你的恋爱》......

旅游要闻

贵州晴隆再回应二十四道拐景区收费:观景台、展览馆将免票

数码要闻

全球首款!研扬发布Panther Lake无风扇迷你主机:AirJet超声波散热

艺术要闻

沙特要盖2000米高楼,一年维护费达8亿美元!

无障碍浏览 进入关怀版