网易首页 > 网易号 > 正文 申请入驻

零成本养虾!谷歌 Gemma 4「本地部署」保姆级教程,三步搞定

0
分享至

来源:市场资讯

(来源:AI信息Gap)

昨天聊了 Gemma 4,今天教你把它装进本地电脑里。 养龙虾终于不用花钱了。 谷歌最新的开源模型 Gemma 4,原生支持 function calling。装在你自己的电脑上,接入 openClaw,token 成本直接归零。 划重点,Gemma 4 是 Gemma 家族第一次用 Apache 2.0 协议开源。商用、魔改、二次分发,都没问题。再加上 Ollama 最近更新了大版本。Apple Silicon 上直接用苹果自家的 MLX 框架推理,速度翻倍。 三步搞定。Mac、Windows、Linux 都可以。 先看看你的电脑有多少内存。 Gemma 4 一共四个版本,下面都以 4-bit 量化为例。 最小的 E2B,23 亿参数,4-bit 量化后约 4 GB 内存。支持图片、音频输入,128K 上下文。手机和树莓派都能跑。 E4B,45 亿参数,约 5.5 GB。同样支持图片和音频,128K 上下文。适合日常聊天。 26B 是混合专家架构(MoE),总参数 252 亿,每次推理只激活 38 亿。4-bit 量化后占 16-18 GB 内存。256K 上下文,支持图片,不支持音频。速度接近小模型,质量接近满血版,性价比最高。24 GB 内存的 Mac 或 24 GB 显存的显卡就能带得动。 满血版 31B,307 亿参数全激活。17-20 GB 内存。256K 上下文。Arena AI 开源排行榜第三,AIME 2026 数学推理 89.2%,编程 LiveCodeBench 80.0%。跑分最猛,24 GB 能跑但比较紧,32 GB 更舒服。 一句话总结,「4 GB 跑 E2B,6 GB 跑 E4B,18 GB 跑 26B,20 GB 以上跑 31B。」 Mac 用户,先去 ollama.com 下载、安装 Ollama。用 Homebrew 也行。 brew install --cask ollama-app Ollama 是目前跑本地模型最简单的工具(之一)。模型下载、推理引擎、API 服务,一个 App 就搞定。 装好后启动 Ollama。打开终端,运行: open -a Ollama 菜单栏会出现一个羊驼图标,等几秒钟初始化完成。根据你的内存选一个模型拉取。以 26B 为例。 ollama run gemma4:26b Ollama 会自动下载模型并启动对话。26B 大约 18 GB,耐心等。 下载完成后直接进入聊天界面。随便问一句,看到回答就成功了。 可以用下面这个命令查看模型运行状态。 ollama ps 你会看到 CPU/GPU 的推理分配比例,比如「14%/86% CPU/GPU」。以 Apple Silicon 为例,大部分计算跑在 GPU 上,速度比纯 CPU 快得多。 三步,搞定。 Windows 用户同理,先下载安装 Ollama。可以直接用客户端,也可以打开 PowerShell,一行命令搞定。 irm https://ollama.com/install.ps1 | iex 装完后打开一个新的 PowerShell 窗口,运行: ollama run gemma4:26b 有 NVIDIA 显卡的话,Ollama 会自动调用 CUDA 加速。没独显也能跑,就是慢一些。 后面是一样的流程。 NVIDIA 用户划重点。Ollama 0.19 新增了 NVFP4 格式支持,用更少的显存跑模型,精度损失很小。RTX 40 系及以上的显卡自动生效。 如果你已经养了一只龙虾,不管是在自己电脑上还是云服务器上,上面这些命令完全不用自己敲。直接给龙虾发消息,它会帮你搞定。 以一台云服务器上的 OpenClaw 为例。全程不碰终端。 先对龙虾说,「在服务器上安装 Ollama。运行这条命令:curl -fsSL https://ollama.com/install.sh | sh」。 龙虾先是发现缺少 zstd 依赖,自己装好之后重新运行安装脚本。 接着拉取模型。「下载 Gemma 4 26B 模型:ollama pull gemma4:26b」 17 GB 的模型文件,校验通过。 然后让它测试。「跟 Gemma 4 聊一句试试:ollama run gemma4:26b "你好,你是什么模型?简单介绍一下自己。"」 Gemma 4 跑起来了。 但纯 CPU 推理,26B 属实有点勉强。 让龙虾换成 E4B。 速度快多了。 理论上还能更进一步。 让龙虾把自己的模型后端切到本地 Gemma 4,API 端点指向 localhost:11434,从此不再需要云端 API。但更推荐满血版作为主力模型,小模型更适合端侧。 龙虾帮你部署了一个免费模型,最后还能把自己也接上去。 最后附上 Ollama 常用命令。 ollama list # 查看已下载的模型 ollama ps # 查看正在运行的模型和内存占用 ollama run gemma4:26b # 启动对话 ollama stop gemma4:26b # 卸载模型释放内存 ollama pull gemma4:26b # 更新到最新版本 ollama rm gemma4:26b # 删除模型 我是木易,Top2 + 美国 Top10 CS 硕,现在是 AI 产品经理。

特别声明:以上内容(如有图片或视频亦包括在内)为自媒体平台“网易号”用户上传并发布,本平台仅提供信息存储服务。

Notice: The content above (including the pictures and videos if any) is uploaded and posted by a user of NetEase Hao, which is a social media platform and only provides information storage services.

相关推荐
热点推荐
深圳超大医院遇冷,8万张床位空着,媒体着急,当地市民吐槽!

深圳超大医院遇冷,8万张床位空着,媒体着急,当地市民吐槽!

眼光很亮
2026-04-05 09:37:32
真实的赵丽颖,你们能接受吗?

真实的赵丽颖,你们能接受吗?

小椰的奶奶
2026-04-05 17:17:17
快讯!伊朗总统突然发文了!

快讯!伊朗总统突然发文了!

达文西看世界
2026-04-05 15:24:07
老爸测评退一赔三最多30万,而董宇辉要赔偿1.2亿

老爸测评退一赔三最多30万,而董宇辉要赔偿1.2亿

映射生活的身影
2026-04-05 16:59:07
伊朗肠子都悔青了!怎么能让美军深入100多公里救走F-15飞行员?

伊朗肠子都悔青了!怎么能让美军深入100多公里救走F-15飞行员?

头条爆料007
2026-04-05 18:55:00
你专业还是我专业!王铸和张雪吵架事件,再次被扒,评论区沸腾了

你专业还是我专业!王铸和张雪吵架事件,再次被扒,评论区沸腾了

火山詩话
2026-04-05 12:09:37
广州数学天才少女,斯坦福辍学创业,25岁拿下超14亿融资,公司估值110亿

广州数学天才少女,斯坦福辍学创业,25岁拿下超14亿融资,公司估值110亿

21世纪经济报道
2026-04-05 20:00:37
大跳水!暴跌50%,市值缩水19亿,中产男人的标配,卖不动了

大跳水!暴跌50%,市值缩水19亿,中产男人的标配,卖不动了

毒sir财经
2026-04-05 21:20:21
黄晓明就“带9岁娃骑行”发文道歉:为自己的疏忽郑重道歉,已去交警部门接受处罚;相关骑行照片已删除

黄晓明就“带9岁娃骑行”发文道歉:为自己的疏忽郑重道歉,已去交警部门接受处罚;相关骑行照片已删除

极目新闻
2026-04-05 18:19:57
北京警方紧急提醒苹果用户

北京警方紧急提醒苹果用户

第一财经资讯
2026-04-05 20:26:27
68万亿城投债倒计时:最后15个月将如何冲击你的财富?

68万亿城投债倒计时:最后15个月将如何冲击你的财富?

流苏晚晴
2026-04-05 13:50:25
涉嫌严重违纪违法,虞安生被查

涉嫌严重违纪违法,虞安生被查

吉刻新闻
2026-04-05 20:05:38
“所有品类都要涨,最高可能30%!”多个品牌店员透露:最好4月中旬前买

“所有品类都要涨,最高可能30%!”多个品牌店员透露:最好4月中旬前买

新浪财经
2026-04-05 10:51:13
伊朗搜捕人员距飞行员藏身地不到3公里!美军营救代价惨烈,损失飞机价值超4亿美元

伊朗搜捕人员距飞行员藏身地不到3公里!美军营救代价惨烈,损失飞机价值超4亿美元

红星新闻
2026-04-05 18:49:42
6-2变5-3!赵心童打丢逆转局面,特鲁姆普死里逃生,或逆转夺冠?

6-2变5-3!赵心童打丢逆转局面,特鲁姆普死里逃生,或逆转夺冠?

刘姚尧的文字城堡
2026-04-05 23:06:56
别尬吹,也别抹黑:美军这次伊朗营救,《纽约时报》都服,是真狠

别尬吹,也别抹黑:美军这次伊朗营救,《纽约时报》都服,是真狠

斯德哥尔摩的帕金森
2026-04-05 18:42:11
索赔2亿!被捧为迅雷救世主的清华高材生,带情妇卷1.7亿跑路5年

索赔2亿!被捧为迅雷救世主的清华高材生,带情妇卷1.7亿跑路5年

毒sir财经
2026-04-03 23:02:02
底牌全打光!霍尔木兹、真主党、胡塞全失效,饥荒蔓延,民生凋敝

底牌全打光!霍尔木兹、真主党、胡塞全失效,饥荒蔓延,民生凋敝

番外行
2026-04-05 00:05:11
越南允许使用星链,至此,全球还有9个国家不能使用星链

越南允许使用星链,至此,全球还有9个国家不能使用星链

谭老师地理大课堂
2026-04-05 20:30:28
研究表明:性生活越频繁,射精和勃起问题越少!

研究表明:性生活越频繁,射精和勃起问题越少!

黯泉
2026-04-05 20:40:12
2026-04-06 01:27:00
呼呼历史论
呼呼历史论
分享有趣的历史
354文章数 16773关注度
往期回顾 全部

科技要闻

花200薅5千算力,Claude冷血断供“龙虾”

头条要闻

营救细节公布:伊朗搜捕人员距飞行员藏身地不到3公里

头条要闻

营救细节公布:伊朗搜捕人员距飞行员藏身地不到3公里

体育要闻

CBA最老球员,身价7500万美元

娱乐要闻

王灿兮否认婆媳不和 晒与杜淳妈合影

财经要闻

谁造出了优思益这头“怪物”?

汽车要闻

家用SUV没驾驶乐趣?极氪8X第一个不同意

态度原创

游戏
教育
时尚
手机
本地

三天鼠标干坏两个,你这还是自走棋嘛?

教育要闻

高考地理中的束水攻沙

伊姐清明热推:电视剧《暴锋雨》;电影《我,许可》......

手机要闻

OPPO Find X9s Pro银色哈苏专业增距镜亮相:观赛神器 颜值拉满

本地新闻

跟着歌声游安徽,听古村回响

无障碍浏览 进入关怀版