网易首页 > 网易号 > 正文 申请入驻

二手显卡改造家用服务器:20GB显存跑AI模型功耗仅60瓦

0
分享至

家用服务器能干什么?装几个软件、存点数据、跑跑自动化任务,差不多就到头了。但如果你往里面塞一张二手显卡,事情就开始变得不一样了。

一位自建服务器玩家分享了他的实践:把一张二手AMD Radeon RX 7900 XT装进家用服务器后,这台机器从“能用的玩具”变成了“能干活的工具”。核心变化在于,20GB的显存让本地跑大语言模型(LLM)成了现实,不再需要依赖云端API或外部服务。


一张二手显卡,改变了服务器的定位

自建服务器的好处不用多说:没有云订阅费、不依赖外部服务、大多数自托管方案完全免费。但瓶颈也很明显——硬件。想跑最新的LLM,CPU和内存的消耗是惊人的,普通家用服务器根本扛不住。

这位玩家的做法是:把家里的服务器整合回单台机器,追求持续运行下的最高效率。他翻出一颗AMD Threadripper 9000系列芯片,调整了UEFI设置来降低待机功耗——听起来有点反直觉,毕竟Threadripper是出了名的“电老虎”。但调校之后,整机待机功耗降到了约60瓦,对比两台Intel Core i5-7400迷你台式机各20瓦的功耗,这个数字相当能打。

AMD ROCm软件栈:从“折腾”到“顺手”

显卡装进服务器后,第一个用途就是跑LLM。这位玩家此前在RTX 5090到带移动处理器的迷你PC上都折腾过Ollama和各类模型,而RX 7900 XT的表现让他印象深刻。

关键转折点在于AMD的ROCm软件栈。过去几年,这套工具链的成熟度提升明显,配合Proxmox的GPU直通(passthrough)功能,配置过程比想象中顺畅。他成功在Proxmox上完成了GPU直通,让虚拟机或容器直接调用这张显卡的计算能力。

LXC容器:一张显卡,多个任务同时跑

这套方案的核心设计在于:所有任务都跑在同一个Proxmox节点上的专用LXC容器里,而不是分散在多个虚拟机(VM)中。

为什么选LXC而不是VM?原因很直接:VM通常需要把整张GPU独占分配给一个实例,而多个LXC容器可以共享同一张显卡。这意味着LLM推理、Immich(照片管理)和Frigate(摄像头监控)可以同时跑在同一台主机上,只用一张GPU,而且开销极低。

LXC的另一个优势是资源按需分配。它不需要像VM那样预先划走一部分主机资源,而是在需要时动态获取——包括GPU算力。这种灵活性让多任务并行变得非常自然。

开源驱动的体验:省心到意外

驱动方面,RX 7900 XT在开源驱动下运行毫无问题。Proxmox社区脚本帮了大忙——安装LXC、配置软件、建立容器内加载GPU所需的链接,这些步骤都有现成脚本可以处理,几乎不需要手动干预。

目前他在这套系统上跑的LLM是qwen3系列模型。20GB显存的空间足够塞进较大规模的模型,既能保证提示词推理(prompt inferencing)的速度,也能处理其他LXC容器随时提出的计算需求。

这套方案意味着什么

把二手显卡塞进家用服务器,本质上是在做一件事:把原本需要云服务的计算能力,拉回本地。没有订阅费,没有数据出网的顾虑,没有外部服务宕机的风险。

对于已经入坑自托管的玩家来说,这可能是下一步最值得投入的升级方向。一张二手显卡的成本,换来的是本地跑LLM、AI照片管理、智能监控的全套能力——而且整机功耗控制在60瓦左右,长期运行的电费压力也不大。

当然,这套方案的门槛在于:你得有一台支持GPU直通的Proxmox主机,愿意花点时间调UEFI和容器配置。但如果你已经走到了自托管这一步,这些折腾大概早就习惯了。

特别声明:以上内容(如有图片或视频亦包括在内)为自媒体平台“网易号”用户上传并发布,本平台仅提供信息存储服务。

Notice: The content above (including the pictures and videos if any) is uploaded and posted by a user of NetEase Hao, which is a social media platform and only provides information storage services.

相关推荐
热点推荐
女性最渴望被亲吻的地方,不是嘴唇,而是这三个地方

女性最渴望被亲吻的地方,不是嘴唇,而是这三个地方

周哥一影视
2026-08-22 17:38:51
升学宴5死再升级!亲历者终于说出实情,墙塌另有原因,本可避免

升学宴5死再升级!亲历者终于说出实情,墙塌另有原因,本可避免

番外行
2026-08-22 13:56:47
上海民政局干部酒后吐真言:90%的婚姻,都毁在这4件“小事”上!

上海民政局干部酒后吐真言:90%的婚姻,都毁在这4件“小事”上!

朗威谈星座
2026-08-22 00:57:04
大家发现没有了吗?油车跑1000公里要500块,电车跑1000公里呢?

大家发现没有了吗?油车跑1000公里要500块,电车跑1000公里呢?

白米饭怎么吃
2026-08-04 20:31:41
爸逼我相亲,我故意穿跟大妈一样,结果男方开劳斯莱斯,我傻眼了

爸逼我相亲,我故意穿跟大妈一样,结果男方开劳斯莱斯,我傻眼了

千秋文化
2026-06-16 19:30:26
北京地铁有乘客车厢内吃榴莲,气味浓烈难以忍受;地铁回应:包装完好可携带但禁止进食

北京地铁有乘客车厢内吃榴莲,气味浓烈难以忍受;地铁回应:包装完好可携带但禁止进食

糖逗在娱乐
2026-08-22 00:03:42
4-5!中超最“惨烈”的比赛,球迷:他们拿冠军,是对足球的侮辱

4-5!中超最“惨烈”的比赛,球迷:他们拿冠军,是对足球的侮辱

汪星人哟
2026-08-22 21:36:09
宁浩新片预测票房30多亿,34家出品方跟着吃肉喝汤,唯独华谊连口汤都没分到

宁浩新片预测票房30多亿,34家出品方跟着吃肉喝汤,唯独华谊连口汤都没分到

草莓解说体育
2026-08-21 11:51:44
杭州酒局事件另一关键人物也被免职,被猥亵受害人朋友:对方紧逼致她摔倒,浑身多处外伤;同事称其系单亲家庭,工作很努力

杭州酒局事件另一关键人物也被免职,被猥亵受害人朋友:对方紧逼致她摔倒,浑身多处外伤;同事称其系单亲家庭,工作很努力

极目新闻
2026-08-19 15:45:36
炸裂!亚航排泄事件后续:阿姨自曝原因,乘客被熏醒,离厕所不到5米远

炸裂!亚航排泄事件后续:阿姨自曝原因,乘客被熏醒,离厕所不到5米远

小鋭有话说
2026-08-22 22:54:16
28岁关晓彤北京啤酒节登台,裙子短得离谱,上个台阶还要护住裙摆

28岁关晓彤北京啤酒节登台,裙子短得离谱,上个台阶还要护住裙摆

动物奇奇怪怪
2026-08-18 05:44:22
相比于许家印的满头白发,我们更应该看看他曾经的骄奢淫逸

相比于许家印的满头白发,我们更应该看看他曾经的骄奢淫逸

清书先生
2026-08-20 15:59:07
一荣俱荣一损俱损!许家印哥哥靠恒大"寄生式"致富,到头来成老赖

一荣俱荣一损俱损!许家印哥哥靠恒大"寄生式"致富,到头来成老赖

莹莹的历史说
2026-08-23 04:56:00
唐时达被举报冒名顶替上大学:面对媒体死磕“谁主张谁举证”,高知分子的顶级体面

唐时达被举报冒名顶替上大学:面对媒体死磕“谁主张谁举证”,高知分子的顶级体面

智慧生活笔记
2026-08-23 02:39:33
俄罗斯传来不幸的消息,8月17日,俄罗斯边境上演了一场让人心痛的悲剧

俄罗斯传来不幸的消息,8月17日,俄罗斯边境上演了一场让人心痛的悲剧

扶苏聊历史
2026-08-18 16:57:55
被中国制裁的人,能当总统?这国没救了!

被中国制裁的人,能当总统?这国没救了!

新财迷
2026-08-22 22:35:25
R9来了!拉什福德替补出战,时隔618天再度为曼联登场

R9来了!拉什福德替补出战,时隔618天再度为曼联登场

懂球帝
2026-08-22 20:46:10
刚从昆明回南宁,说句实在话,怎么感觉像从“大城市”回“小镇城”

刚从昆明回南宁,说句实在话,怎么感觉像从“大城市”回“小镇城”

音乐时光的娱乐
2026-08-22 15:33:26
于海青:为何说临沂小区发生爆炸事件引发了我的深思考?

于海青:为何说临沂小区发生爆炸事件引发了我的深思考?

于海青
2026-08-23 00:30:52
卖完80多个万达广场,个人财富缩水9成,如今王健林手里还剩啥?

卖完80多个万达广场,个人财富缩水9成,如今王健林手里还剩啥?

莫地方
2026-08-18 22:32:13
2026-08-23 05:44:49
全栈遛狗员
全栈遛狗员
白天跟需求对线,晚上在小区遛狗。
229文章数 114关注度
往期回顾 全部

数码要闻

M6+均热板+触控屏,苹果史上贵MacBook Pro要来了!

头条要闻

全季起诉“金季”索赔10万 老板娘:日租才50到60元

头条要闻

全季起诉“金季”索赔10万 老板娘:日租才50到60元

体育要闻

字母+汤神,有没有搞头?

娱乐要闻

《空枪》预测票房缩水,手握王炸都没赢

财经要闻

蔡昉解读经济:扩大消费需求的政策思考

科技要闻

苹果裁员200人:Vision Pro砍游戏团队

汽车要闻

钛9全球首秀/四季度上市 方程S系列内饰车展亮相

态度原创

数码
艺术
房产
旅游
手机

数码要闻

华硕ROG雷切2 PRO无线手柄上架,售价1299元

艺术要闻

60年里的惊人照片,记忆的定格!

房产要闻

两大热盘即将入市!三亚又一批安居房狠货要炸场了!

旅游要闻

视频丨看电影、赏美景 暑假到西藏“过林卡”感受别样的日光之城

手机要闻

小米18 Pro透明探索版回归:致敬一代经典小米8

无障碍浏览 进入关怀版