网易首页 > 网易号 > 正文 申请入驻

128GB内存的AMD迷你PC能跑5090带不动的模型,但作者还是推荐买二手3090

0
分享至

一台售价3999美元、连独立显卡都没插的迷你PC,居然能在AI圈激起水花,原因只一个:它能装下别处怎么也塞不进的模型。这就是AMD的Ryzen AI Halo,那块基于Ryzen AI Max+ 395处理器,带着128GB统一内存的Strix Halo开发者套件。gpt-oss-120B、Qwen 3 Coder Next,甚至特调量化版的DeepSeek V4 Flash,它全能吞下去。事实上,它能装下一大票32GB的RTX 5090连加载都加载不了的模型,而且跑起许多混合专家模型来,速度是真正可用的那一档。

我花了大把时间在一台128GB统一内存的机器上,不过不是眼前这台,而是联想ThinkStation PGX,也就是英伟达GB10 Grace Blackwell盒子。跟它打交道的过程让我看清了共享内存池能带给你什么,也顺带曝出那些初看之下很容易被忽略的瑕疵。Ryzen AI Halo就是AMD对同一个想法的回应,现在每GB成本更低,只是底层软件栈换成了ROCm而非CUDA。但底层的取舍逻辑完全一致:你拿到的是独立显卡永远给不了的内存容量,付出的代价则是让显卡显得飞快的带宽和软件舒适度。


不巧的是,刚掏腰包的人听到这个结论可能笑不出来:对绝大多数人拿本地模型来干的事而言,我的选择仍然是一张二手RTX 3090,价格比Halo便宜一大截。Halo在一个对比维度上赢得很彻底,赢得令人信服,只不过那压根不是多数人真正在意的较量。

Ryzen AI Halo能装下显卡做梦都装不下的模型。容量就是它全部的出发点。Ryzen AI Halo拥有128GB统一内存,由CPU和集成的Radeon 8060S共享为同一个连贯的地址池,其中最多96GB可以划给GPU当显存。你既不用担心模型权重在PCIe总线上传来传去,也不用琢磨怎么把模型劈开塞进两块甚至更多块显卡里。更不必费神折腾那些歪门邪道,好让模型勉强挤进内存——到了这个容量级别,大概率它直接就能装下。

每一张显卡都守着一堵硬墙:RTX 5090的上限是32GB,二手RTX 3090或者4090只给你24GB,一旦模型权重加上KV缓存越过这条线,速度就断崖式跌穿地板。极端情况下,模型干脆拒绝加载。Halo要面对的硬墙远得多,你得盯着那些显存需求超过96GB的模型才会撞上,而到了这个体量,问题已经彻底换了一个量级。

这些设备的内存被吐槽“慢”,纸面数字是256GB/s,但在今天这已经不算多大个事了。时下最热门的一大批模型用的都是混合专家架构,意思是模型把数量极庞大的全部参数都驻留在内存里,但每生成一个token只读取其中很小一部分,也就是那些被激活的“专家”。gpt-oss-120B在内存里存着全部1200亿参数,每个token只激活区区几十亿,所以生成所需吞吐量远低于全参加载一条路走到底的情况。

特别声明:以上内容(如有图片或视频亦包括在内)为自媒体平台“网易号”用户上传并发布,本平台仅提供信息存储服务。

Notice: The content above (including the pictures and videos if any) is uploaded and posted by a user of NetEase Hao, which is a social media platform and only provides information storage services.

相关推荐
热点推荐
英国新首相出炉,对华态度不一般!

英国新首相出炉,对华态度不一般!

戎评
2026-07-18 14:18:01
19岁亚马尔已拥有4任女友!审美远超梅西。未来会步内马尔后尘吗

19岁亚马尔已拥有4任女友!审美远超梅西。未来会步内马尔后尘吗

纵横之策
2026-07-18 22:05:39
吸金1600亿!落魄的诺基亚,2026年居然卖断货,重回全球第二

吸金1600亿!落魄的诺基亚,2026年居然卖断货,重回全球第二

李砍柴
2026-07-09 23:00:03
以为上火,实际却是癌症信号!若出现这4种“预警”,别疏忽大意

以为上火,实际却是癌症信号!若出现这4种“预警”,别疏忽大意

芹姐说生活
2026-07-18 23:12:36
31岁跑步男确诊酮症酸中毒:天天锻炼,血糖爆表只需一周

31岁跑步男确诊酮症酸中毒:天天锻炼,血糖爆表只需一周

健身狂人
2026-07-18 18:02:21
老公在电网干32年,原以为退休4500,结果单子下来震惊:抽3根烟

老公在电网干32年,原以为退休4500,结果单子下来震惊:抽3根烟

智慧生活笔记
2026-07-19 06:37:06
30亿《功夫女足》惹争议,周星驰的广告植入玩大了

30亿《功夫女足》惹争议,周星驰的广告植入玩大了

首席品牌观察
2026-07-16 16:30:22
特朗普要是拿不下伊朗,中国之后会干什么,西方已经想都不敢想

特朗普要是拿不下伊朗,中国之后会干什么,西方已经想都不敢想

共工之锚
2026-07-17 00:26:45
世界杯决赛对决!阿根廷 与 西班牙近况全解析,胜负走势一目了然

世界杯决赛对决!阿根廷 与 西班牙近况全解析,胜负走势一目了然

科一爱历史
2026-07-18 22:24:30
文物大盗卢芹斋:只因想亲近岳母才娶了15岁的妻子,妻子连生四女才识破内情,母亲才是这个家里真正的"夫人"

文物大盗卢芹斋:只因想亲近岳母才娶了15岁的妻子,妻子连生四女才识破内情,母亲才是这个家里真正的"夫人"

磊子讲史
2026-07-15 15:12:27
联手杰森·斯坦森狂揽7亿,他新片未映又爆了:续集已定档2028

联手杰森·斯坦森狂揽7亿,他新片未映又爆了:续集已定档2028

影视情报室
2026-07-19 01:10:50
59岁王志文娶富婆,近况曝光老到认不出

59岁王志文娶富婆,近况曝光老到认不出

悦君兮君不知
2026-07-18 05:59:51
西班牙国脚赛前开炮:阿根廷队踢法粗野被裁判纵容,决赛小心被激怒

西班牙国脚赛前开炮:阿根廷队踢法粗野被裁判纵容,决赛小心被激怒

星河漫山野
2026-07-19 01:40:55
2-3爆冷,两大世界冠军出局,龙蟒半决赛战林高远!马龙回应丁宁现场观战!

2-3爆冷,两大世界冠军出局,龙蟒半决赛战林高远!马龙回应丁宁现场观战!

好乒乓
2026-07-18 22:12:30
知名投资人Grantham称SpaceX是“史上最疯IPO”:50年后人们会当笑话看

知名投资人Grantham称SpaceX是“史上最疯IPO”:50年后人们会当笑话看

全栈遛狗员
2026-07-19 01:44:48
颜值网红,向夜场撤退

颜值网红,向夜场撤退

娱乐硬糖
2026-07-17 11:18:58
太唏嘘!美AI巨头集体缺席上海WAIC,竟是被自家政策限制发展?

太唏嘘!美AI巨头集体缺席上海WAIC,竟是被自家政策限制发展?

趣文说娱
2026-07-18 23:07:46
第二个许家印!又一首富倒了!世界500强也没那么强

第二个许家印!又一首富倒了!世界500强也没那么强

风干迷茫人
2026-07-18 01:55:02
莫迪政府摊牌了?前驻华大使:宁从中国购买技术,也不能信任美国

莫迪政府摊牌了?前驻华大使:宁从中国购买技术,也不能信任美国

阿晪美食
2026-07-19 03:36:19
成龙深夜悲痛发文,林凤娇才是最狠的那个,吴绮莉摊牌有四大原因

成龙深夜悲痛发文,林凤娇才是最狠的那个,吴绮莉摊牌有四大原因

情感大头说说
2026-07-19 07:24:57
2026-07-19 07:59:00
碳基打工人
碳基打工人
坐标北京,靠咖啡续命,靠小红书下饭的普通人类。
289文章数 55关注度
往期回顾 全部

数码要闻

惠普EliteBook 8 G2a 16笔记本来了,最高64GB内存

头条要闻

英格兰队6:4夺季军 法国队上半场状态低迷形同梦游

头条要闻

英格兰队6:4夺季军 法国队上半场状态低迷形同梦游

体育要闻

法国半场连丢4球 连创5大耻辱纪录

娱乐要闻

大S给具俊晔留遗产是昏头?实际上她清醒得很

财经要闻

股民当街砍博主!韩国股市 终极大屠杀

科技要闻

WAIC2026看什么?这份"不迷路"攻略请收好

汽车要闻

把中国超跑卖到英国,比亚迪正在被世界看见

态度原创

手机
时尚
教育
健康
家居

手机要闻

vivo Y6c 4G版手机开售:4GB+128GB、展锐T7225,售价899元

钱没白花|| 用了6年、真正留下来的心头爱,这次有好价!

教育要闻

2026全国高考首份普通本科投档线出炉!上交追平北大!天大暴涨!

刮痧也会刮出脑梗?讲个真实案例

家居要闻

2026建博会(广州) 公装联探展交流活动

无障碍浏览 进入关怀版