网易首页 > 网易号 > 正文 申请入驻

天数智芯首次实机演示天垓300!单卡吞吐约H200的1.05倍,端侧硬刚Thor T5000

0
分享至


芯东西(公众号:aichip001)
作者 程茜
编辑 心缘

芯东西10月28日报道,今日,天数智芯首次实机演示了通用GPU天垓300以及端侧算力终端TY1200。其还预告了标称算力达600T的下一代端侧产品TY2000,支持多机互联、弹性扩容、离线部署。

天数智芯披露,上海仪电今年7月完成的第三方实测显示,在典型PD分离部署下,天垓300折算单卡整体端到端吞吐达到H200的1.05倍,是国内首个实测性能达到英伟达H200水平的通用GPU。此外,其端侧算力终端彤央TY1200在实测中也超越了英伟达的Thor T5000。


在AI领域,云端用更高效率输出更高算力,软件栈加速云端的智能部署、调优,端侧让算力走入更多现实世界,触碰到物理世界,这正是天数智芯当下布局的关键。

天数智芯AI与加速计算负责人单天逸谈道,AI正从信息智能到行动智能,再到探索智能,形成智慧飞轮。信息智能就是理解信息、生成信息和转换信息的能力;行动智能是让AI有行动的能力,能自己去规划、执行、反馈;探索智能是AI自主设计、验证、迭代,如AI for Science、物理AI、具身智能等领域。

今年1月,该公司公布了芯片的4代架构图,天数天枢架构已于2025年发布、天数天璇架构于2026年发布、天数天玑架构于2026年发布、天数天权架构计划于2027年发布。

天数智芯所做的事就是为上文提到的一次次智慧飞轮循环提供源源不断的算力。

一、TY1200实测性能超Thor T5000,端侧算力训练出双足鸭机器人

如今,企业愈发看重低时延、数据合规等,再加上参数规模较小的大模型性能飙涨,AI商业化的矛盾从能不能用转向AI持续规模化使用的成本问题。

基于此,天数智芯彤央产品市场负责人宋远盈谈道,算力的性价比是当前业界关注的重点,而谁能给出最优的性价比,谁就能占得先机。

这背后的一个明显趋势就是算力需要分层,这是天数智芯布局边端产品的核心原因。

今年1月,天数智芯正式发布边端系列彤央,并形成了1+2+5的矩阵。

1指一套成熟通用GPU架构和完整软件栈组成的生态;2指面向两种客户提供的算力模组和算力终端两种形态产品;5指的是5个产品,其中算力模组产品包括TY1000、TY1100,算力终端产品包括TY1100-NX、TY1100-NX-PRO、TY1200。


宋远盈现场实测对比了TY1200和英伟达Thor-T5000的效果。关于两款设备的参数对比,Thor-T5000为2P FP4稀疏算力,128GB的共享内存;TY1200为300 TOPS INT8稠密算力,存储是32GB系统内存+32GB HBM2e显存。

其选择了Qwen3.8-27B模型,首先向模型提问了“狮子和老虎单挑谁会打赢”。结果显示,TY1200的首词延迟更低、吞吐更高、输出时间更短。


根据天数智芯公开的数据,在大语言模型、多模态模型、世界模型等的实测中,TY1200的TPS(每秒词元数)均超越了T5000。宋远盈称,TY1200性能更优的原因在于显存带宽更高、计算核数量更多。


TY1200潜在客户是AI视频生成的创作者、需要保密的场景以及物理AI场景的企业。

演示人员现场实测的下一个任务是文生视频。她让两款产品生成了猫咪打架并打碎了花瓶的视频。TY1200在6分10秒内生成了5秒视频。


其次是对保密要求更高的法务合规场景,演示人员现场演示了基于企业内部的规则进行法务合同审核。

最后是物理AI场景。其现场用端侧算力训练了双足鸭机器人MicroDuck,让MicroDuck在仿真环境里完成各项活动,包括前进、后退、转身、被推倒后站起等。


演示人员现场还让实体的MicroDuck自己走动,并在摔倒后站起来。


在具体的应用方面,其基于TY1200打造了面向储能电芯研究的垂直AI智能体;此外在视觉识别领域,传统方案的视觉识别准确率为70%,天数智芯用CV+多模态+端侧算力,再结合云端进行应急指挥管理,将视觉识别的准确率提升至95%。

此外,机器狗基于TY1000算力模组能实现自动识别、跟随主人,感知、决策、行动,整个过程都在本地完成;基于TY1200算力终端打造的陪诊机器人,能为患者带路、理解医院就诊流程。


二、为下一代AI而生的天垓300,现场实测让“豆包迎娶奶龙”

单天逸重点提到面向下一代AI打造的全新计算平台天垓300。天垓300有144GB显存、支持芯片间高速互联,搭载新一代Tensor Core,支持FP4、FP8、FP16、BF16等数据精度。


天数智芯性能实验室的实测显示,在64K长上下文下,天垓300的Attention性能为H200的1.05倍。


GLM-5.3模型64K规模下,在保障同等用户体验的同时,天垓300 MoE吞吐为H200的1.15倍。


8K至128K长上下文场景下,天垓300的Agent首字延迟较H200降低约10%—30%;多模态生成推理吞吐,天垓300相较H200提升约2%—5%;在搜广推等在线业务中,推荐推理吞吐提升21%、轻量计算时延降低26%。


训练方面,在基于Qwen3-32B模型的8卡整机FP8精度训练演示中,天垓300每卡有效吞吐达到H100的1.33倍。

强化学习已成为OpenAI、Google、Meta、xAI以及DeepSeek、Qwen、MiniMax、Kimi等国内外主力模型公开采用的核心后训练路线。据条件性工程估算,天垓300以1024张卡对已有预训练基座开展一次强化学习,在40B激活参数的中心情景下,约26天可完成约1T总参数MoE模型的500亿生成Token强化学习任务。


单天逸现场实测了天垓300与H200在文生图、文生视频方面的性能。

其生成了“一个亚麻发色、穿白色连衣裙的女生在冰面行走,赛博朋克风格”的图片,天垓300 4秒就生成了第一张图片。


此外,其现场生成了“豆包穿着骑士装迎娶奶龙”的视频。天垓300的吞吐量为0.628,相比H200更高,且任务的完成速度、服务端的推理速度更快。


在规模化交付层面,单天逸透露,天垓300已形成从加速卡、一机8卡服务器到超节点的完整系统方案。天垓300 IXL144超节点在单个标准机柜内集成144颗GPU、聚合约10.1TB显存,是目前业界密度最高的单机柜GPU超节点,据测算,其每百万有效Token成本较国际主流方案可降低约40%。

其新一代P2P互联引擎面向Scale-up和Scale-out,目标是将域内单次传输延迟由3—5微秒降至1微秒;支持统一内存语义编程;同时支持大EP,将专家权重分散到更多核心。

三、首家深度接入FlyDSL的国产GPGPU厂商,编译速度提升超90%

天数智芯副总裁、软件开发负责人石加圣围绕易于使用、易于优化、易于开发三个方面,展示了天数智算软件栈关于Agentic AI的系统性布局。


首先是易于使用,天数智芯的软件栈将环境安装、配置检查与模型部署方法组织为智能体可调用的工具与技能,由AI协助执行并检查结果,减少开发者反复查阅文档、手动配置和排查问题的负担。

在模型PD分离部署实测中,环境准备与服务部署整体用时由1小时缩短至10分钟,人工操作由数十步减少至1步。

其次是易于优化,软件栈结合自研性能分析工具与调优经验,让AI依据真实运行数据定位瓶颈、提出优化方案,并通过测试验证效果。根据某大模型调优任务实测,工作周期由7天缩短至2小时内;在相同硬件、模型和精度要求下,相关任务运行性能较优化前接近翻倍。

最后是易于开发,他提到,天数智芯是首家深度接入FlyDSL的国产GPGPU厂商,通过Agent与FlyDSL协同,让AI参与代码生成、编译、测试和性能优化。


开发者明确目标与约束,AI协助生成或修改候选实现,再根据正确性检查和性能测试结果持续调整,最终完成自主开发、验证与迭代,形成从目标提出到结果验收的工程闭环。

石加圣透露,在某主流模型适配与调优实测中,过去10人天完成的工作,现在1人在小时级内就能完成,编译速度提升90%以上,理想状态可用1%的编译时间实现99%的运行性能。

结语:云端+软件协同,国产算力要迈向自主进化阶段

天垓300在真实业务测试中达到对标国际主流产品的水平,标志着国产通用GPU开始具备在复杂AI任务和高算力市场中快速发展的实力。

从其布局来看,云端高效生产智能,软件加速进化,端侧拓宽现实应用、连接物理世界,三端协同让高效率、可预期、可持续的算力在循环中积累。模型在云端持续变强,下沉到端侧落地;端侧的真实场景反过来反哺云端优化算子、量化策略与模型结构,持续压低落地成本、提升业务稳定性,最终形成国产算力自主进化的正向飞轮。

特别声明:以上内容(如有图片或视频亦包括在内)为自媒体平台“网易号”用户上传并发布,本平台仅提供信息存储服务。

Notice: The content above (including the pictures and videos if any) is uploaded and posted by a user of NetEase Hao, which is a social media platform and only provides information storage services.

相关推荐
热点推荐
APEC会议前,高市早苗突然向中方表态,提及台湾问题,用意不一般

APEC会议前,高市早苗突然向中方表态,提及台湾问题,用意不一般

鹤羽说个事
2026-10-29 06:15:04
新疆男篮1分险胜同曦,阿不都沙拉木15+11+5,郭昊文空砍20+10!

新疆男篮1分险胜同曦,阿不都沙拉木15+11+5,郭昊文空砍20+10!

中国篮坛快讯
2026-10-29 21:53:11
倒闭8.4万家!无数中年人的“庇护所”,如今为何跌下神坛?

倒闭8.4万家!无数中年人的“庇护所”,如今为何跌下神坛?

三农雷哥
2026-10-24 14:59:15
全网光速和姆巴佩切割,但你不知道那段采访到底是什么时候录的?

全网光速和姆巴佩切割,但你不知道那段采访到底是什么时候录的?

李昕言温度空间
2026-10-28 15:00:46
伦敦人开始骑“电驴”上班了!1000英镑一辆,折合人民币9000块,比国内贵三倍,英国年轻人抢着买

伦敦人开始骑“电驴”上班了!1000英镑一辆,折合人民币9000块,比国内贵三倍,英国年轻人抢着买

扶苏聊历史
2026-10-28 11:24:19
陈宇昕身披旭日旗新进展:居住小区再次曝光,呼吁其父母出面解释

陈宇昕身披旭日旗新进展:居住小区再次曝光,呼吁其父母出面解释

平老师666
2026-10-29 14:48:40
击沉一艘055究竟有多难?其实不是难,是没可能,因为055下水以后,打的比辽宁号还猛

击沉一艘055究竟有多难?其实不是难,是没可能,因为055下水以后,打的比辽宁号还猛

扶苏聊历史
2026-10-29 13:21:45
穆里尼奥弃用!皇马巨星沦为第三替补!名宿怒喷:他犯了天大错误

穆里尼奥弃用!皇马巨星沦为第三替补!名宿怒喷:他犯了天大错误

奶盖熊本熊
2026-10-29 08:07:47
埃梅里耻辱一战:0-3出局,大黑马疯狂5连胜:击败米兰,横扫曼联,完胜维拉

埃梅里耻辱一战:0-3出局,大黑马疯狂5连胜:击败米兰,横扫曼联,完胜维拉

足球狗说
2026-10-29 06:23:15
法国球星姆巴佩到底说了什么错话?

法国球星姆巴佩到底说了什么错话?

去非
2026-10-27 17:09:59
“一斤赶上买十斤猪肉了”,消费者直呼吃不起,网友疑惑:从现在开始囤年货吗?

“一斤赶上买十斤猪肉了”,消费者直呼吃不起,网友疑惑:从现在开始囤年货吗?

山东教育电视台
2026-10-29 00:01:04
2换3!雷霆和76人这笔交易方案,绝对能实现双方共赢

2换3!雷霆和76人这笔交易方案,绝对能实现双方共赢

球毛鬼胎
2026-10-29 21:59:31
实不相瞒,我感觉一个小小的台湾战争,极有可能成为中国的世纪之战

实不相瞒,我感觉一个小小的台湾战争,极有可能成为中国的世纪之战

二大爷观世界
2026-10-28 18:19:10
紧急提醒:明天有大事发生,一定要小心!

紧急提醒:明天有大事发生,一定要小心!

星图金融研究院
2026-10-29 01:07:20
连锁崩盘!姆巴佩代价惨重,高额赔偿金曝光,四年深耕市场一夜清零

连锁崩盘!姆巴佩代价惨重,高额赔偿金曝光,四年深耕市场一夜清零

体育见习官
2026-10-29 10:56:14
小米前高管王腾开新品发布会提到雷军,自己离职后曾有大厂邀请,但还是选择做智能戒指

小米前高管王腾开新品发布会提到雷军,自己离职后曾有大厂邀请,但还是选择做智能戒指

极目新闻
2026-10-29 20:08:32
2米25大个子空篮放不进,球迷:你跟范子铭、焦泊乔并称国产三软

2米25大个子空篮放不进,球迷:你跟范子铭、焦泊乔并称国产三软

弄月公子
2026-10-29 07:29:42
以色列大选投票结束,内塔尼亚胡连任的可能性,已经远低于下台

以色列大选投票结束,内塔尼亚胡连任的可能性,已经远低于下台

青青衫书生
2026-10-29 13:25:02
兵败如山倒?加油站或已用现状证明,油车可能真的越来越没活路了

兵败如山倒?加油站或已用现状证明,油车可能真的越来越没活路了

浩渺青史
2026-10-28 05:21:30
巴佩发表涉华争议言论,法国总统马克龙这回彻底坐不住了。

巴佩发表涉华争议言论,法国总统马克龙这回彻底坐不住了。

荆楚寰宇文枢
2026-10-28 22:09:11
2026-10-29 23:39:00
芯东西 incentive-icons
芯东西
智东西AI媒体矩阵品牌。芯东西,芯片产业新媒体。我们是一群追芯人,专注报道AI芯片和半导体产业创新。
2675文章数 8164关注度
往期回顾 全部

科技要闻

MacBook终于能触屏了:22999元起

头条要闻

媒体:守住不该守住的底盘 77岁的内塔尼亚胡逃出生天

头条要闻

媒体:守住不该守住的底盘 77岁的内塔尼亚胡逃出生天

体育要闻

超级黑马!球队不败 29岁的他得分榜前三

娱乐要闻

白百何被曝和二婚丈夫离婚 和男生逛街

财经要闻

两大娱乐巨头,谈崩了

汽车要闻

标配宁德时代电池 智己LS8 NEO纯电预售24.98万起

态度原创

艺术
本地
游戏
手机
房产

艺术要闻

佛山最大别墅区,房子密密麻麻挨着建,少见人影,看着都可惜!

本地新闻

十月奔赴迪庆,解锁梅里日照金山

《GTA6》剧情目标披露:双主角都想退出犯罪共同生活

手机要闻

iPhone Air 2爆料:补上续航与超广角,价格仍是关键!

房产要闻

12.1亿!三亚挂出重磅宅地!

无障碍浏览 进入关怀版