网易首页 > 网易号 > 正文 申请入驻

在NAS上利用OpenWebUI+Ollama部署DeepSeek、通义千问等AI大模型

0
分享至

一、前言

一直想尝试在NAS上部署AI大语言模型,可无奈之前NAS设备的硬件配置比较落后,运行最低参数的模型也比较吃力。

不久前,我升级了家里的主力NAS,换上了威联通新品NAS——威联通Qu405,硬件配置有了质的提升,能支撑流畅运行文本系列大模型,而它的外观设计和一些细节配置相比之前的型号也做出了不小的改变。接下来,我就用这台威联通Qu405复盘如何利用OpenWebUI部署DeepSeek、通义千问等大模型。



二、硬件介绍

教程开始前,先来了解一下本文的主角威联通Qu405吧。

威联通Qu405是一款4盘位NAS,支持4块3.5英寸或2.5英寸SATA接口硬盘,同时还内置2个M.2 PCIe Gen 3插槽,可配置双M.2 SSD组建高速储存池或快取加速,提升存储和运算效率。

如果盘位不够用,还可以选择它的同门师兄8盘位的Qu805。而且,两台机器加量不加价,又赶上双11促销,4盘位到手价3100元左右,8盘位到手价也只要3300元左右,价格非常给力。





威联通Qu405最重要的升级是它搭载了新一代Intel酷睿N355处理器,拥有8核心8线程,最大睿频频率3.9 GHz,6MB高速缓存。性能表现如下图所示,N355处理器的综合性能大约是N6005、N100的2倍,比目前主流的高端NAS处理器intel Pentium Gold 8505提升了约19%,提升非常显著。



AI大模型的训练和运行非常吃内存,以往我用的几台NAS多是8GB内存,运行大模型捉襟见肘。我这台威联通Qu405配备金士顿16GB SODIMM DDR5内存,虽然官方介绍这台机器支持内存最大容量16GB,但实测最大可以扩展到24GB(测试使用的是英睿达内存条),联合酷睿N355处理器,为部署 AI大模型打下坚实的硬件基础。



这台NAS前置1个USB-C 3.2 Gen 2接口,背面则是HDMI 2.1视频接口(4K@60Hz)、双2.5GbE网口(支持链路聚合)以及2个USB 3.2 Gen2(10Gbps)接口,丰富的拓展接口足以满足日常所需。



三、部署模型

(1)配置Open WebUI

利用威联通NAS的Container Station配置Open WebUI,Container Station-应用程序-创建。

Open WebUI是一款功能强大、扩展性强的自托管网页界面,支持多种大型语言模型框架,兼容Ollama与OpenAI API以及兼容LMStudio、OpenRouter等多款LLM服务。



在YMAL代码窗口输入以下Open WebUI的Docker Compose配置文件,验证通过后点击创建即可。

  • services:
  • open-webui:
  • container_name: open-webui
  • image:
    ghcr.io/open-webui/open-webui:ollama# 镜像名称
    restart: always # 重启策略
  • ports:
  • - 3000:8080 # Web服务访问端口
  • volumes:
  • - ./ollama:/root/.ollama # ollama相关数据存储
    -
    ./open-webui:/app/backend/data# Web UI后端数据存储



创建完成后,系统会自动拉取镜像并启动容器,至此,Open WebUI部署完成。



在浏览器输入登陆地址进入Open WebUI界面。登陆地址是NAS的局域网IP+端口,比如我的是:

  • http://192.168.50.228:3000

需要注意到是,部署完成之后需要5-10分钟时间加载数据,没有加载完成之前访问会提示【拒绝连接】,不要慌,耐心等待加载完成再访问。



首次访问时,需要设置用户名、电子邮件和密码来创建管理员账户。



(2)添加模型

打开Ollama模型库(https://ollama.com/search),找到所需模型并复制拉取命令,例如选择:

  • ollama run deepseek-r1







复制之后来到Container Station,在创建的容器后方设置-执行



粘贴拉取命令,等待模型下载完成。





下载完成之后重启容器,然后在控制台执行命令,并且,之后每次使用模型都需要先执行命令。



重新登录 Open WebUI ,在左上角确认模型是否成功加载。



选择所需模型就可以愉快地与AI对话啦。



四、总结

利用OpenWebUI+Ollama可以部署DeepSeek、GPT、千问、Gemma等众多主流AI模型,而利用NAS部署DeepSeek这些大语言模型的核心价值在于能实现离线运行,延迟更低、响应速度更快,更能保障数据隐私与安全,感兴趣的小伙伴还不快动起来!

特别声明:以上内容(如有图片或视频亦包括在内)为自媒体平台“网易号”用户上传并发布,本平台仅提供信息存储服务。

Notice: The content above (including the pictures and videos if any) is uploaded and posted by a user of NetEase Hao, which is a social media platform and only provides information storage services.

相关推荐
热点推荐
辛柏青的状态很可能不容乐观,不仅是心态,身体有可能也出了问题

辛柏青的状态很可能不容乐观,不仅是心态,身体有可能也出了问题

银河史记
2025-10-31 17:23:53
中国5胜3负!两场6-0:丁俊晖+张安达晋级!2位种子选手爆冷出局

中国5胜3负!两场6-0:丁俊晖+张安达晋级!2位种子选手爆冷出局

小火箭爱体育
2025-11-02 22:50:36
森林狼队安东尼·爱德华兹伤情更新,预计“可能”复出时间公布

森林狼队安东尼·爱德华兹伤情更新,预计“可能”复出时间公布

好火子
2025-11-03 05:26:49
翁帆最新近况:穿35块的帆布鞋,带34箱手稿搬离旧居

翁帆最新近况:穿35块的帆布鞋,带34箱手稿搬离旧居

金牌娱乐
2025-11-02 09:53:48
刚刚!特朗普下令“战争部”做好准备

刚刚!特朗普下令“战争部”做好准备

健身狂人
2025-11-03 03:07:37
乌军投降了,红军城大鱼落网,俄凌晨击落6架敌机,基辅封锁消息

乌军投降了,红军城大鱼落网,俄凌晨击落6架敌机,基辅封锁消息

影孖看世界
2025-11-02 23:36:09
厨媛“上门服务”,一次800元2小时!网友:穿成这样,不打自招!

厨媛“上门服务”,一次800元2小时!网友:穿成这样,不打自招!

深度报
2025-11-01 21:15:25
86岁老人随口乱说代号,儿子上报后,国安领导:马上接通中央部委

86岁老人随口乱说代号,儿子上报后,国安领导:马上接通中央部委

知鉴明史
2025-10-23 14:01:49
男人,最好不要有这几种“面相”,晚年的结果都不太好

男人,最好不要有这几种“面相”,晚年的结果都不太好

小鬼头体育
2025-11-02 06:01:32
从《康熙王朝》到《澎湖海战》:为什么影视剧要把施琅塑造成英雄

从《康熙王朝》到《澎湖海战》:为什么影视剧要把施琅塑造成英雄

七彩论世
2025-11-02 18:30:56
曼联的痛:拉什福德重回巅峰,神级停球后小角度爆杆破门,太牛了

曼联的痛:拉什福德重回巅峰,神级停球后小角度爆杆破门,太牛了

侧身凌空斩
2025-11-03 03:29:09
重磅非农来袭,黄金继续大扫荡!

重磅非农来袭,黄金继续大扫荡!

杨子黄金
2025-11-02 21:29:29
哈里愤怒发声:不公平!安德鲁用查尔斯私房钱花天酒地,梅根却因是黑人还二婚被虐待

哈里愤怒发声:不公平!安德鲁用查尔斯私房钱花天酒地,梅根却因是黑人还二婚被虐待

东方不败然多多
2025-11-02 16:36:34
没错!日本外援:中国球员最大问题是基本功,短距离传球都传不准

没错!日本外援:中国球员最大问题是基本功,短距离传球都传不准

茜子足球
2025-11-02 12:34:05
何祚庥:我对核聚变研究的质疑,就是向杨振宁先生这样的先贤学习

何祚庥:我对核聚变研究的质疑,就是向杨振宁先生这样的先贤学习

怀疑探索者
2025-11-02 21:29:01
皮肤干燥多吃它,胶原蛋白是猪蹄的两倍,更容被吸收,解馋两不误

皮肤干燥多吃它,胶原蛋白是猪蹄的两倍,更容被吸收,解馋两不误

阿龙美食记
2025-10-29 14:12:19
中美最近在太空进行了一次较量,绝对是高手过招,招招致命

中美最近在太空进行了一次较量,绝对是高手过招,招招致命

荐史
2025-11-01 23:15:22
萨哈林岛热电厂爆炸:十万居民重返煤油灯时代。

萨哈林岛热电厂爆炸:十万居民重返煤油灯时代。

世界探索者探索
2025-11-01 21:08:09
突发特讯!美方:美军机连续坠入南海并非巧合,引发国际舆论

突发特讯!美方:美军机连续坠入南海并非巧合,引发国际舆论

起喜电影
2025-11-03 04:26:35
欧佩克从俄罗斯、伊拉克等五个国家收到了最新的减产补偿计划

欧佩克从俄罗斯、伊拉克等五个国家收到了最新的减产补偿计划

财联社
2025-11-03 04:22:13
2025-11-03 05:40:49
老王加油 incentive-icons
老王加油
专注数码、智能家居类产品评测
373文章数 158关注度
往期回顾 全部

科技要闻

10月零跑突破7万辆,小鹏、蔚来超4万辆

头条要闻

马来西亚首富之子买上海大平层 449平米1.17亿元

头条要闻

马来西亚首富之子买上海大平层 449平米1.17亿元

体育要闻

这个日本人,凭啥值3.25亿美元?

娱乐要闻

陈道明被王家卫说他是阴阳同体的极品

财经要闻

段永平捐了1500万元茅台股票!本人回应

汽车要闻

神龙汽车推出“发动机终身质保”政策

态度原创

手机
旅游
家居
公开课
军事航空

手机要闻

华为Mate80风扇版确认:五款机型同台竞技,18号见!

旅游要闻

这道金黄的绝美秋景里藏着古韵京华

家居要闻

吸睛艺术 富有传奇色彩

公开课

李玫瑾:为什么性格比能力更重要?

军事要闻

俄在日本海演习击沉假想敌潜艇

无障碍浏览 进入关怀版