网易首页 > 网易号 > 正文 申请入驻

35B多模态模型塞进手机,只要3GB内存

0
分享至

35B参数的多模态模型,跑在手机上,占用内存只要3GB。面壁智能发布的 MiniCPM-V 4.7,把这件事变成了可以上手试的东西。

官方演示里,这个模型在真实场景中读路牌、在约束条件下做规划、解析复杂文档、对视觉数据做推理。不是跑在云端服务器上,是本地运行。


3GB内存背后的调度逻辑

支撑这套推理的是 LES,即 Lookahead Expert Scheduling(前瞻专家调度)。MiniCPM-V 4.7 采用 35B-A3B 的 MoE 架构,靠这套调度机制把高效 MoE 推理带到了移动设备上。

MoE 的思路是每次推理只激活一部分专家,而不是把全部参数都跑一遍。35B-A3B 这个命名本身就说明了激活规模——总参数35B,实际激活的是A3B这一档。LES 要解决的,是在手机这种内存和算力都受限的环境里,怎么把专家调度做得足够前瞻、足够省。

除了35B这一档,还有一个轻量级的 1B 变体,面向资源更紧张的硬件,提供可用的多模态理解能力。两档产品覆盖的是不同层级的设备。

开发者可以自己调

面壁智能同时给出了 Self-Replay Fine-Tuning(SRFT,自回放微调)。按官方说法,开发者可以用它把模型定制到新任务上,同时保持通用性能不塌。

微调多模态模型常见的麻烦是:新任务学好了,原来的通用能力掉了。SRFT 针对的正是这个取舍。对想在本地跑定制多模态能力的开发者来说,这条路径的意义在于不用从零训练,也不用牺牲模型的通用底子。

从 iOS 到 Android,MiniCPM-V 4.7 的定位是让多模态 AI 在本地跑起来更实际。模型权重和代码已经放出,GitHub 仓库为 OpenBMB/MiniCPM,Hugging Face 上有对应合集,SRFT 的技术说明发布在 openbmb.cn 的博客上。

手机端跑大模型这件事,过去几年卡在内存和功耗上。3GB 这个数字如果能在真实设备上稳住,意味着中端机型也有机会本地跑多模态推理,而不必把图片和文档传到云端。

特别声明:以上内容(如有图片或视频亦包括在内)为自媒体平台“网易号”用户上传并发布,本平台仅提供信息存储服务。

Notice: The content above (including the pictures and videos if any) is uploaded and posted by a user of NetEase Hao, which is a social media platform and only provides information storage services.

相关推荐
热点推荐
AI短剧正在毁掉中年男人?

AI短剧正在毁掉中年男人?

功夫财经
2026-10-14 08:37:56
湖人首秀11+9+1帽!凯斯勒16分钟篮下统治攻防 雷迪克盛赞卢卡笑了

湖人首秀11+9+1帽!凯斯勒16分钟篮下统治攻防 雷迪克盛赞卢卡笑了

颜小白的篮球梦
2026-10-14 11:59:15
东体:根宝基地招生有困难,外地生源受限,本地精英凤毛麟角

东体:根宝基地招生有困难,外地生源受限,本地精英凤毛麟角

懂球帝
2026-10-14 12:54:05
凌晨解禁的Gemini4,可能是目前最适合普通人的AI。

凌晨解禁的Gemini4,可能是目前最适合普通人的AI。

差评XPIN
2026-10-14 12:17:01
重击乌克兰!开战四五年,基辅第一次被打成几乎全黑状态!

重击乌克兰!开战四五年,基辅第一次被打成几乎全黑状态!

故事终将光明磊落
2026-10-14 10:45:08
林恬儿懒理何正德秀恩爱,晒42岁生日照感叹生命美好,一家人都在

林恬儿懒理何正德秀恩爱,晒42岁生日照感叹生命美好,一家人都在

小疯子耶
2026-10-14 08:54:17
女尼姑胡晓慧被捕,审讯时6名男徒弟向警察坦言:我们都被她骗了

女尼姑胡晓慧被捕,审讯时6名男徒弟向警察坦言:我们都被她骗了

罪案洞察者
2025-07-25 10:32:39
82岁林豆豆现状:独居北京不上网,丈夫去世也没孩子,以父辈为荣

82岁林豆豆现状:独居北京不上网,丈夫去世也没孩子,以父辈为荣

诺斯罗普的笔记呀
2026-10-13 18:26:17
中国为啥要下血本猛搞新能源车?说句实在话,环保就是个幌子,石油也不过是个由头。

中国为啥要下血本猛搞新能源车?说句实在话,环保就是个幌子,石油也不过是个由头。

回京历史梦
2026-10-13 09:22:14
比尔盖茨表示:他这辈子犯过最大的错误,就是把原本属于微软的移动生态,拱手让给了安卓

比尔盖茨表示:他这辈子犯过最大的错误,就是把原本属于微软的移动生态,拱手让给了安卓

元气科技馆
2026-10-10 21:56:30
茅台酒价格暴跌!最新报价曝光,不少网友看后都笑了

茅台酒价格暴跌!最新报价曝光,不少网友看后都笑了

阿莱美食汇
2026-10-13 13:14:43
何穗现身农场,生图皮肤惨白腿骨凹坑,穿香奈儿下地收菜好豪横

何穗现身农场,生图皮肤惨白腿骨凹坑,穿香奈儿下地收菜好豪横

娱说瑜悦
2026-10-13 18:04:57
金晨自曝刚交完学费,美国学校就倒闭了,自己才上了两天;此前为游学进修暂时放缓演艺工作节奏

金晨自曝刚交完学费,美国学校就倒闭了,自己才上了两天;此前为游学进修暂时放缓演艺工作节奏

大风新闻
2026-10-14 10:43:05
排队道歉?松岛辉空确实多次受中国观众闪光灯干扰!母亲:我儿没撒谎

排队道歉?松岛辉空确实多次受中国观众闪光灯干扰!母亲:我儿没撒谎

念洲
2026-10-14 09:28:56
多地开始严查社保实缴,社保的钱哪去了?

多地开始严查社保实缴,社保的钱哪去了?

城事堂
2026-10-13 09:17:19
男子半夜带女下属爬山,还问女下属:你丈夫晚上给你“交作业”吗

男子半夜带女下属爬山,还问女下属:你丈夫晚上给你“交作业”吗

四海神君
2026-10-13 21:00:04
郑钦文夺冠后商场扫货,穿4W运动装背2.5W包,柜姐帮拎3个大袋子

郑钦文夺冠后商场扫货,穿4W运动装背2.5W包,柜姐帮拎3个大袋子

小疯子耶
2026-10-13 14:33:09
热议:如何看待近期社保纳入税务处罚?评论区炸锅...

热议:如何看待近期社保纳入税务处罚?评论区炸锅...

慧翔百科
2026-10-13 08:44:25
14岁小女孩已能扣篮!身高2.2米+臂展2.27米 郑海霞在她身边矮一个头

14岁小女孩已能扣篮!身高2.2米+臂展2.27米 郑海霞在她身边矮一个头

颜小白的篮球梦
2026-10-14 13:16:07
这就是经济下行期的小三吗,时代变得我不认识了

这就是经济下行期的小三吗,时代变得我不认识了

再战五百回合
2026-10-13 09:11:43
2026-10-14 14:48:49
野生运营
野生运营
懂点产品,懂点AI,正在努力给平淡日子搞点新花样。
186文章数 96关注度
往期回顾 全部

科技要闻

两大厂接连挖人,明星AI公司申请破产保护

头条要闻

特朗普前"准儿媳"被要求辞去大使职务 特朗普曾被激怒

头条要闻

特朗普前"准儿媳"被要求辞去大使职务 特朗普曾被激怒

体育要闻

30天30队·太阳:金毛、比特、杜宾和二哈

娱乐要闻

蔡卓妍回应张致恒欠钱不还 不指望还钱

财经要闻

AI短剧正在毁掉中年男人?

汽车要闻

豪华智能全拉满 比亚迪大汉不止旗舰级舒适

态度原创

家居
游戏
时尚
健康
军事航空

家居要闻

2026建博会(广州) 公装联探展交流活动

《地平线2》移植作者谈后续:有意移植三款游戏

是时候穿风衣了!这8件高级又好看

孩子运动莫名晕倒?当心这类疾病

军事要闻

特朗普称俄乌都同意“能源停火” 俄方回应

无障碍浏览 进入关怀版