网易首页 > 网易号 > 正文 申请入驻

这些AI工作站看似PC,实则性能更强劲

0
分享至


生成式AI的兴起推动了对能在本地硬件上运行或训练模型的AI工作站的需求。然而,现代PC已被证明不足以胜任这一任务。典型的笔记本电脑只有足够的内存来加载具有80亿到130亿参数的大语言模型,这比据推测拥有超过一万亿参数的前沿模型要小得多,智能程度也低得多。即使是最强大的工作站PC也难以为拥有超过700亿参数的大语言模型提供服务。

Tenstorrent公司的QuietBox 2试图填补这一空白。尽管它看起来像一台PC工作站,但QuietBox 2包含四个该公司定制的Blackhole AI加速器、128GB的GDDR6内存(GPU中使用的专用内存)和256GB的DDR5系统内存(总共384GB)。这种配置提供足够的内存来加载OpenAI的GPT-OSS-120B,并且可以以接近每秒500个Token的速度运行Meta的Llama 3.1 70B等中等规模模型。作为参考,这比OpenAI的GPT-5.2或Anthropic的Claude 4.6的平均响应速度快几倍。QuietBox 2的预期零售价为9999美元,计划于2026年第二季度发布。

Tenstorrent联合创始人兼系统工程师Milos Trajkovic说:"我们AI加速器所拥有的128GB GDDR真正定义了你能以合理速度运行多大模型。我们的128GB GDDR6 RAM需要四块Nvidia RTX 5090显卡才能实现。这无法装进今天1600瓦的形态因子中,而且四块RTX 5090 GPU的成本是巨大的。"

功耗问题至关重要

功耗结果证明是至关重要的。Nvidia建议单块RTX 5090的系统功率为1000瓦,因此即使是双GPU设置也会超过典型15安培、120伏电路的连续功耗。配备四块RTX 5090的系统在负载时可能需要4000瓦或更多功率。

另一方面,QuietBox 2在满负荷时仅消耗1400瓦。它不会跳闸,因此可以在典型桌面PC可能插入的任何地方使用,包括家庭办公室。

这并不是QuietBox 2伪装成普通PC的唯一方式。该机器的定制机箱专为支持micro-ATX主板形态因子而构建,主板本身是搭载AMD CPU的AMD芯片组。硬件通过类似于PC工作站和游戏计算机使用的闭环液冷系统保持冷却。它甚至具有可定制的RGB LED照明和一个展示硬件的大型半透明窗口。

Tenstorrent热机械工程师兼团队负责人Chris Goulet说:"我们的许多内部开发人员都要求一台QuietBox,因为它们非常容易部署。你只需将设备运送给他们,他们把它放在桌子上,通电,就可以开始工作了。"

QuietBox 2与桌面PC的不同之处在于其AI加速器。它配备了四个Tenstorrent的Blackhole专用集成电路,这是专为AI工作负载设计的RISC-V芯片。Blackhole封装在扩展卡上;每个卡有120个Tensix AI加速器和32GB GDDR6内存,总共480个Tensix AI加速器和128GB GDDR6。Blackhole还在每个加速器上有大量片上SRAM,为180MB。

Nvidia的竞争方案

Tenstorrent在这种方法上并不孤单。Nvidia去年发布的DGX Spark将Nvidia的GB10芯片封装在一台饭盒大小的机器中。Spark的升级版DGX Station搭载Nvidia的GB300,于2026年3月16日开始接受订单。

DGX Station看起来像桌面PC工作站,变体版本将由Dell和Asus等知名PC品牌制造。Nvidia的产品比QuietBox 2拥有更多内存,最高可达748GB,但系统功率标注为1600瓦,这相当接近15安培、120伏断路器能处理的最大值。这反映了他们对机器使用方式的不同愿景。当然,Nvidia DGX Station的额外内存并不便宜。虽然大多数DGX Station系统制造商尚未公布定价,但一家零售商已将来自PC制造商MSI的DGX Station标价为85000美元。

当我在2025年DGX Spark和Station发布后与Nvidia产品营销总监Allyn Bourgoyne交谈时,他说公司预计大多数DGX所有者将把这些设备用作远程访问工作站。"你可能看到的常见情况是,我有我的Windows笔记本电脑,我将通过网络使用我的DGX Spark。我将向它发送任务。"他补充说,公司可以部署DGX Spark和Station系统来同时为多人提供服务。

Tenstorrent QuietBox 2可以这样使用,但该公司也希望针对人与计算机一对一交互提供良好体验。Trajkovic说:"你不必远程SSH进入该设备。你通过HDMI连接显示器,它就像你家里的PC一样。它有Ubuntu桌面和实用程序。"

Nvidia的DGX系统也运行Ubuntu的变体(DGX OS)并包含桌面环境,但细节很重要。DGX系统使用基于ARM架构的Nvidia CPU和定制芯片组。QuietBox 2使用AMD x86 CPU和兼容芯片组,配置更像传统PC。这对QuietBox 2的软件兼容性应该是一个优势。

Tenstorrent通过专注于开源软件来利用这一点。QuietBox 2的整个软件栈,从TT-Forge(该公司的AI编译器)到TT-Metalium(提供内核级硬件控制的低级软件开发工具包),都是开源的并在GitHub上可用。Tenstorrent还发布了其Tensix核心的指令集架构,因此开发人员可以确切地看到他们的工作负载如何在硬件上执行。相比之下,Nvidia专注于其专有的CUDA生态系统,DGX OS不是开源的。

Goulet说:"我们的软件栈很大一部分是完全开放的,我们觉得从硬件角度来看,我们也想走类似的道路。"

Q&A

Q1:QuietBox 2和普通PC相比有什么优势?

A:QuietBox 2配备了四个定制Blackhole AI加速器和384GB总内存,能以接近每秒500个Token的速度运行Meta的Llama 3.1 70B等大语言模型,比普通PC的AI处理能力强得多。同时它仅消耗1400瓦功率,可在家庭办公环境正常使用。

Q2:Tenstorrent和Nvidia的AI工作站有什么不同?

A:Tenstorrent QuietBox 2定价9999美元,采用AMD x86架构,软件栈完全开源;而Nvidia DGX Station定价约85000美元,采用ARM架构,使用专有CUDA生态系统。QuietBox 2更注重个人直接使用体验,DGX Station更偏向远程访问使用。

Q3:这些AI工作站主要解决了什么问题?

A:主要解决了本地运行大语言模型的硬件限制问题。普通笔记本只能运行80-130亿参数的模型,而这些AI工作站能运行700亿参数以上的大型模型,为企业和开发者提供了本地部署高性能AI模型的解决方案。

特别声明:以上内容(如有图片或视频亦包括在内)为自媒体平台“网易号”用户上传并发布,本平台仅提供信息存储服务。

Notice: The content above (including the pictures and videos if any) is uploaded and posted by a user of NetEase Hao, which is a social media platform and only provides information storage services.

相关推荐
热点推荐
电讯报评英超历史TOP10:亨利第1、C罗第7、萨拉赫第8

电讯报评英超历史TOP10:亨利第1、C罗第7、萨拉赫第8

懂球帝
2026-03-26 00:23:06
7.12大战后,我国为何要用火焰喷射器将战场上的越军尸体全烧掉?

7.12大战后,我国为何要用火焰喷射器将战场上的越军尸体全烧掉?

冰语历史
2026-03-26 11:40:47
面对伊朗同归于尽打法,美军亮出王炸底牌:如果战败,就爆核武器

面对伊朗同归于尽打法,美军亮出王炸底牌:如果战败,就爆核武器

半壁胭脂色
2026-03-24 16:09:17
张雪峰去世,日媒用了这样一句话评价他...

张雪峰去世,日媒用了这样一句话评价他...

今日日本
2026-03-25 11:10:15
欧洲人在性方面有多开放?德国再创历史!女厕所、女浴室随便进了

欧洲人在性方面有多开放?德国再创历史!女厕所、女浴室随便进了

西楼知趣杂谈
2026-03-24 14:38:30
1978年,邱清泉之子邱国渭,以蚂蚁搬家方式将全家送往美国

1978年,邱清泉之子邱国渭,以蚂蚁搬家方式将全家送往美国

老谢谈史
2026-03-20 10:24:19
古代皇帝的龙袍禁止水洗,那脏了臭了咋办?真是贫穷限制咱的想象

古代皇帝的龙袍禁止水洗,那脏了臭了咋办?真是贫穷限制咱的想象

铭记历史呀
2026-03-24 08:08:14
唏嘘!张雪峰去世真相+遗嘱公布!巨额财产受益人竟然是她?

唏嘘!张雪峰去世真相+遗嘱公布!巨额财产受益人竟然是她?

魔都囡
2026-03-26 02:41:36
存在串通投标行为!中铁广州工程局集团被住建部门公示

存在串通投标行为!中铁广州工程局集团被住建部门公示

南方都市报
2026-03-25 19:59:11
为嫁给美国人,56岁南京大妈奔赴美国,2年后嫁给70岁美国老头

为嫁给美国人,56岁南京大妈奔赴美国,2年后嫁给70岁美国老头

情感艺术家
2026-03-08 22:07:38
你在无意中发现别人什么秘密?网友爆料,电视剧都不敢这样演

你在无意中发现别人什么秘密?网友爆料,电视剧都不敢这样演

夜深爱杂谈
2026-03-16 22:21:03
主力资金爆买化工股!600800,二连板!

主力资金爆买化工股!600800,二连板!

证券时报e公司
2026-03-26 12:26:30
张雪峰病倒才知妻是隐藏大佬!40天闪婚,这眼光比报志愿还准

张雪峰病倒才知妻是隐藏大佬!40天闪婚,这眼光比报志愿还准

陈意小可爱
2026-03-26 12:18:09
哈萨克斯坦也没想到,跟着中国混来混去,结果自己也混成了个霸主

哈萨克斯坦也没想到,跟着中国混来混去,结果自己也混成了个霸主

小樾说历史
2026-03-25 12:16:16
克什米尔,印度与巴基斯坦为何争夺八十年?

克什米尔,印度与巴基斯坦为何争夺八十年?

地图帝
2026-03-25 09:17:39
特朗普万万没想到!第一个敢掀桌子的,竟然是马来西亚

特朗普万万没想到!第一个敢掀桌子的,竟然是马来西亚

黑鹰观军事
2026-03-25 17:12:13
俄军三大教训告诉中国:别全靠导弹,别小看美国,最重要的是啥?

俄军三大教训告诉中国:别全靠导弹,别小看美国,最重要的是啥?

花颜蕴韵
2026-03-26 11:09:47
有网友在大冰直播间看到弹幕称张雪峰因心脏骤停离世,大冰随即回应:我下午就已得知此事,心情十分沉重

有网友在大冰直播间看到弹幕称张雪峰因心脏骤停离世,大冰随即回应:我下午就已得知此事,心情十分沉重

画夕
2026-03-26 01:20:12
内幕曝光:10名主力被抽走,U23国足被逼到绝境,他却笑了!

内幕曝光:10名主力被抽走,U23国足被逼到绝境,他却笑了!

体育热点看台
2026-03-26 10:02:01
教育彻底变天!2026届初中生注意,这是最后一届只拼分数的一届

教育彻底变天!2026届初中生注意,这是最后一届只拼分数的一届

老特有话说
2026-03-25 15:22:58
2026-03-26 13:00:49
至顶头条 incentive-icons
至顶头条
记录和推动数字化创新
17146文章数 49696关注度
往期回顾 全部

科技要闻

Meta高管狂分百亿期权,700名员工却下岗

头条要闻

伊朗议长和外长暂被移出美以清除名单 时限4到5天

头条要闻

伊朗议长和外长暂被移出美以清除名单 时限4到5天

体育要闻

35岁替补门将,凭什么入选英格兰队?

娱乐要闻

张雪峰家人首发声 不设追思会丧事从简

财经要闻

黄仁勋:芯片公司的时代已经结束了

汽车要闻

一汽奥迪A6L e-tron开启预售 CLTC最大续航815km

态度原创

健康
房产
数码
旅游
公开课

转头就晕的耳石症,能开车上班吗?

房产要闻

质价比标杆!三亚首创浮岛全景舱亮相,还得是万科!

数码要闻

海盗船MAKR PRO 75霍尔效应磁轴键盘国行上市,1999元

旅游要闻

人不算多风景极美 清明假期去这7座宝藏小城

公开课

李玫瑾:为什么性格比能力更重要?

无障碍浏览 进入关怀版