网易首页 > 网易号 > 正文 申请入驻

在NAS上利用OpenWebUI+Ollama部署DeepSeek、通义千问等AI大模型

0
分享至

一、前言

一直想尝试在NAS上部署AI大语言模型,可无奈之前NAS设备的硬件配置比较落后,运行最低参数的模型也比较吃力。

不久前,我升级了家里的主力NAS,换上了威联通新品NAS——威联通Qu405,硬件配置有了质的提升,能支撑流畅运行文本系列大模型,而它的外观设计和一些细节配置相比之前的型号也做出了不小的改变。接下来,我就用这台威联通Qu405复盘如何利用OpenWebUI部署DeepSeek、通义千问等大模型。



二、硬件介绍

教程开始前,先来了解一下本文的主角威联通Qu405吧。

威联通Qu405是一款4盘位NAS,支持4块3.5英寸或2.5英寸SATA接口硬盘,同时还内置2个M.2 PCIe Gen 3插槽,可配置双M.2 SSD组建高速储存池或快取加速,提升存储和运算效率。

如果盘位不够用,还可以选择它的同门师兄8盘位的Qu805。而且,两台机器加量不加价,又赶上双11促销,4盘位到手价3100元左右,8盘位到手价也只要3300元左右,价格非常给力。





威联通Qu405最重要的升级是它搭载了新一代Intel酷睿N355处理器,拥有8核心8线程,最大睿频频率3.9 GHz,6MB高速缓存。性能表现如下图所示,N355处理器的综合性能大约是N6005、N100的2倍,比目前主流的高端NAS处理器intel Pentium Gold 8505提升了约19%,提升非常显著。



AI大模型的训练和运行非常吃内存,以往我用的几台NAS多是8GB内存,运行大模型捉襟见肘。我这台威联通Qu405配备金士顿16GB SODIMM DDR5内存,虽然官方介绍这台机器支持内存最大容量16GB,但实测最大可以扩展到24GB(测试使用的是英睿达内存条),联合酷睿N355处理器,为部署 AI大模型打下坚实的硬件基础。



这台NAS前置1个USB-C 3.2 Gen 2接口,背面则是HDMI 2.1视频接口(4K@60Hz)、双2.5GbE网口(支持链路聚合)以及2个USB 3.2 Gen2(10Gbps)接口,丰富的拓展接口足以满足日常所需。



三、部署模型

(1)配置Open WebUI

利用威联通NAS的Container Station配置Open WebUI,Container Station-应用程序-创建。

Open WebUI是一款功能强大、扩展性强的自托管网页界面,支持多种大型语言模型框架,兼容Ollama与OpenAI API以及兼容LMStudio、OpenRouter等多款LLM服务。



在YMAL代码窗口输入以下Open WebUI的Docker Compose配置文件,验证通过后点击创建即可。

  • services:
  • open-webui:
  • container_name: open-webui
  • image:
    ghcr.io/open-webui/open-webui:ollama# 镜像名称
    restart: always # 重启策略
  • ports:
  • - 3000:8080 # Web服务访问端口
  • volumes:
  • - ./ollama:/root/.ollama # ollama相关数据存储
    -
    ./open-webui:/app/backend/data# Web UI后端数据存储



创建完成后,系统会自动拉取镜像并启动容器,至此,Open WebUI部署完成。



在浏览器输入登陆地址进入Open WebUI界面。登陆地址是NAS的局域网IP+端口,比如我的是:

  • http://192.168.50.228:3000

需要注意到是,部署完成之后需要5-10分钟时间加载数据,没有加载完成之前访问会提示【拒绝连接】,不要慌,耐心等待加载完成再访问。



首次访问时,需要设置用户名、电子邮件和密码来创建管理员账户。



(2)添加模型

打开Ollama模型库(https://ollama.com/search),找到所需模型并复制拉取命令,例如选择:

  • ollama run deepseek-r1







复制之后来到Container Station,在创建的容器后方设置-执行



粘贴拉取命令,等待模型下载完成。





下载完成之后重启容器,然后在控制台执行命令,并且,之后每次使用模型都需要先执行命令。



重新登录 Open WebUI ,在左上角确认模型是否成功加载。



选择所需模型就可以愉快地与AI对话啦。



四、总结

利用OpenWebUI+Ollama可以部署DeepSeek、GPT、千问、Gemma等众多主流AI模型,而利用NAS部署DeepSeek这些大语言模型的核心价值在于能实现离线运行,延迟更低、响应速度更快,更能保障数据隐私与安全,感兴趣的小伙伴还不快动起来!

特别声明:以上内容(如有图片或视频亦包括在内)为自媒体平台“网易号”用户上传并发布,本平台仅提供信息存储服务。

Notice: The content above (including the pictures and videos if any) is uploaded and posted by a user of NetEase Hao, which is a social media platform and only provides information storage services.

相关推荐
热点推荐
杰拉德不算世界级!弗格森直言:利物浦另一位中场比他强多了

杰拉德不算世界级!弗格森直言:利物浦另一位中场比他强多了

澜归序
2026-03-15 06:29:20
远离“造神”陷阱!59岁的于东来,人设接连翻车,给所有人提了醒

远离“造神”陷阱!59岁的于东来,人设接连翻车,给所有人提了醒

有范又有料
2025-09-23 15:52:53
战火未停,特朗普又把矛头指向朝鲜?金与正放下狠话:必先发制人

战火未停,特朗普又把矛头指向朝鲜?金与正放下狠话:必先发制人

林子说事
2026-03-13 20:28:42
电车没有任何技术含量,都是组装车!挖下的坑正在埋了他们自己

电车没有任何技术含量,都是组装车!挖下的坑正在埋了他们自己

柏铭锐谈
2026-03-14 19:23:56
王濛破格晋升不到24小时,令人担心的事发生,李琰的话有人信了

王濛破格晋升不到24小时,令人担心的事发生,李琰的话有人信了

寒士之言本尊
2026-03-14 17:15:27
确实不多见!湖人派出过五个白人的阵容!

确实不多见!湖人派出过五个白人的阵容!

篮球大图
2026-03-14 08:08:41
59岁蒋雯丽移居英国,摆脱传闻终于不用戴面具

59岁蒋雯丽移居英国,摆脱传闻终于不用戴面具

白色得季节
2026-03-15 04:00:54
伊朗副外长:允许部分国家船只通过霍尔木兹海峡

伊朗副外长:允许部分国家船只通过霍尔木兹海峡

界面新闻
2026-03-13 06:56:50
原湖南省教育厅厅长夏智伦的深耕之路

原湖南省教育厅厅长夏智伦的深耕之路

星空区块链
2026-03-14 22:03:17
新疆首府为何设在乌鲁木齐,而不是条件更好的库尔勒、喀什或伊犁

新疆首府为何设在乌鲁木齐,而不是条件更好的库尔勒、喀什或伊犁

铭记历史呀
2026-03-09 14:18:43
北京停暖倒计时2天!暖气片咋处理咋保温?

北京停暖倒计时2天!暖气片咋处理咋保温?

手工制作阿爱
2026-03-14 21:33:31
示弱了?巴拿马运河部长承认中国对他们很重要,希望中远海运别走

示弱了?巴拿马运河部长承认中国对他们很重要,希望中远海运别走

阿天爱旅行
2026-03-14 18:14:42
南京不放春假?有家长已经接到通知!

南京不放春假?有家长已经接到通知!

马蹄烫嘴说美食
2026-03-14 19:54:38
数名院士呼吁高血压患者停止食用,比甜食还粘血管,趁早撤下餐桌

数名院士呼吁高血压患者停止食用,比甜食还粘血管,趁早撤下餐桌

陈医生健康杂谈
2026-03-15 05:05:07
哎!又一个赛季报销的!!右脚趾籽骨切除

哎!又一个赛季报销的!!右脚趾籽骨切除

柚子说球
2026-03-14 07:47:31
15599元华为折叠屏手机才用三天就黑屏!华为服务中心:维修再掏1999

15599元华为折叠屏手机才用三天就黑屏!华为服务中心:维修再掏1999

中国能源网
2026-03-14 10:06:25
美伊战争爆发!“四个没想到”打破人们的认知,进而震惊了世界

美伊战争爆发!“四个没想到”打破人们的认知,进而震惊了世界

今日马说
2026-03-05 10:36:09
中超:浙江1-1申花!王钰栋赛季首球+特谢拉破门,申花差6分清零

中超:浙江1-1申花!王钰栋赛季首球+特谢拉破门,申花差6分清零

烧体坛
2026-03-14 17:34:18
5换1赛季报销亏麻了!感谢国王,骑士新援近三战场均17分1断1帽

5换1赛季报销亏麻了!感谢国王,骑士新援近三战场均17分1断1帽

你的篮球频道
2026-03-14 10:50:24
盗版游戏,又要活了?

盗版游戏,又要活了?

差评XPIN
2026-03-15 00:12:27
2026-03-15 07:39:00
老王加油 incentive-icons
老王加油
专注数码、智能家居类产品评测
382文章数 158关注度
往期回顾 全部

科技要闻

xAI创始伙伴只剩两人!马斯克“痛改前非”

头条要闻

81岁老人坚持跨海探病105天 含泪送别了在ICU的老伴

头条要闻

81岁老人坚持跨海探病105天 含泪送别了在ICU的老伴

体育要闻

NBA唯一巴西球员,增重20KG顶内线

娱乐要闻

九成美曝田栩宁孕期出轨 AI反转引热议

财经要闻

3·15影子暗访|神秘的“特供酒”

汽车要闻

吉利银河M7技术首秀 实力重构主流电混SUV

态度原创

时尚
本地
数码
亲子
公开课

伊姐周六热推:电视剧《逐玉》;电视剧《江湖夜雨十年灯》......

本地新闻

坐标北京,过敏季反向迁徒

数码要闻

AWE洗衣机观察:卷烘干、卷AI,「无感」洗衣才是未来?

亲子要闻

带娃提前"立规矩"比"事后吼"更管用的3个科学方法

公开课

李玫瑾:为什么性格比能力更重要?

无障碍浏览 进入关怀版