网易首页 > 网易号 > 正文 申请入驻

Liquid AI开源多模态模型LFM2-VL,用4.5亿参数实现高效视觉理解

0
分享至

近期,英伟达研究团队发表的一项研究表明,小语言模型(SLMs,Small Language Models)在 AI 智能体(Agent)系统中具备巨大潜力,能够以更低的成本和延迟提供与大模型相当的性能。研究指出,当前 AI Agent 系统过度依赖大语言模型(LLMs,Large Language Models)的设计范式存在经济和环境可持续性问题,而小模型在专门化任务上往往能够达到甚至超越大模型的表现,同时其较低的计算需求和内存占用使其更适合在智能手机、边缘设备等终端环境中部署。

越来越多的厂商也在推出更小规模的模型,例如谷歌最近推出的 270M 参数的 Gemma 3 270M 模型,显示出业界对高效小模型的重视。

也正是在这一趋势下,脱胎于麻省理工学院(MIT)计算机科学与人工智能实验室(CSAIL)的人工智能公司 Liquid AI,正式推出了其首个视觉-语言基础模型系列 LFM2-VL。该系列模型就旨在解决当前多模态人工智能模型因体积庞大而难以在终端设备上部署的普遍问题,致力于为智能手机、笔记本电脑、可穿戴设备和各类嵌入式系统提供高效、低延迟的 AI 视觉理解能力。目前,LFM2-VL 系列的模型权重已在 Hugging Face 社区开源,供开发者和研究人员使用。

LFM2-VL 系列首批发布了两种不同参数规模的模型,以满足不同设备的部署需求。其中,LFM2-VL-450M 是一款拥有 4.5 亿参数的轻量级模型,主要面向资源极为有限的环境,如智能手表或基础物联网节点。

另一款 LFM2-VL-1.6B 则拥有 16 亿参数,提供更全面的性能,适用于高端智能手机、个人电脑以及配备单块 GPU 的设备。根据 Liquid AI 公布的数据,LFM2-VL 在 GPU 上的推理速度最高可达同类视觉语言模型的两倍,同时在图像描述、视觉问答等多个行业标准基准测试中,其表现与一些参数量更大的模型相比也具有竞争力,而内存占用则显著降低。

LFM2-VL 的性能优势来源于其独特的底层架构。该模型构建于 Liquid AI 自家的液态基础模型(LFM, Liquid Foundation Models)之上,这一架构的设计灵感源自于动态系统与信号处理理论,与当前主流的 Transformer 架构在处理序列数据的方式上有所不同,为其带来了计算效率上的先天优势。具体到 LFM2-VL 的实现,其结构由语言模型主干、视觉编码器和多模态投影器三个核心模块组成。语言部分沿用了 LFM2 模型,而视觉编码器则采用了 SigLIP2 NaFlex。

为了进一步提升效率,LFM2-VL 集成了一项名为“像素解混(pixel unshuffle)”的技术。该技术能够在处理图像时智能地减少需要分析的图像令牌(token)数量,从而降低计算负荷,加快处理速度。在处理图像输入方面,LFM2-VL 也避免了许多模型中常见的图像失真问题。它支持最高 512x512 像素的原生分辨率输入,无需对图像进行强制拉伸或裁剪。对于超过此尺寸的图像,模型会将其分割为多个无重叠的图块进行处理,并通过编码一幅完整的低分辨率缩略图来获取全局上下文信息,以此保证对图像细节和整体场景的全面理解。

在实际应用中,开发者可以根据具体需求,在不重新训练模型的情况下,通过调整输入模型的图像令牌和图块数量,来动态平衡模型的处理速度与分析精度。为了便于社区使用,LFM2-VL 已与 Hugging Face Transformers 等主流开发库集成,并支持量化技术,可通过降低数据精度来进一步压缩模型体积,适应边缘硬件的严苛要求。

在许可方面,该模型对年收入低于 1000 万美元的公司提供免费商业使用授权,而大型企业则需联系 Liquid AI 获取商业许可。

对于 AI Agent 和海量的终端设备而言,像 LFM2-VL 这样轻量、高效、专为端侧设计的模型,正是将 AI 能力从云端解放出来、推向大规模实际应用的关键。AI 的下一个浪潮,或许将由这些小而精悍的模型驱动,它们才是真正让智能无处不在的核心力量。

参考资料:

1.https://www.liquid.ai/blog/lfm2-vl-efficient-vision-language-models

2.https://arxiv.org/pdf/2506.02153

排版:刘雅坤

特别声明:以上内容(如有图片或视频亦包括在内)为自媒体平台“网易号”用户上传并发布,本平台仅提供信息存储服务。

Notice: The content above (including the pictures and videos if any) is uploaded and posted by a user of NetEase Hao, which is a social media platform and only provides information storage services.

相关推荐
热点推荐
打赏陪睡案女主播合租室友发声:魏莹每月陪睡一两次,枕头没干过,经常哭到缺氧

打赏陪睡案女主播合租室友发声:魏莹每月陪睡一两次,枕头没干过,经常哭到缺氧

世界圈
2026-08-24 20:54:42
“我都想给自己俩大嘴巴子”!从一线女星到接不到戏,马苏回应职业低谷时哭诉:过去不值一提,你曾经演女一号,你就了不起了吗?

“我都想给自己俩大嘴巴子”!从一线女星到接不到戏,马苏回应职业低谷时哭诉:过去不值一提,你曾经演女一号,你就了不起了吗?

洪观新闻
2026-09-16 14:16:13
小学生被体育老师掌掴后耳聋,警方称“属教育行政部门管辖”终止调查;国内先后发生多起“教育惩戒”致学生受伤事件,引发家长诉讼

小学生被体育老师掌掴后耳聋,警方称“属教育行政部门管辖”终止调查;国内先后发生多起“教育惩戒”致学生受伤事件,引发家长诉讼

南方都市报
2026-10-01 09:35:49
港股暴跌近3%,医药、地产、科技集体杀跌,原因找到了

港股暴跌近3%,医药、地产、科技集体杀跌,原因找到了

金石随笔
2026-10-02 10:24:21
阿森纳3400万镑新边锋措利斯在希腊队受伤,不愿下场;将返回阿森纳检查,阿尔特塔焦急等待检查结果

阿森纳3400万镑新边锋措利斯在希腊队受伤,不愿下场;将返回阿森纳检查,阿尔特塔焦急等待检查结果

福酱的小时光
2026-10-02 13:33:19
彻底撕开遮羞布!美国公布柬埔寨28人电诈名单,全是高层权贵

彻底撕开遮羞布!美国公布柬埔寨28人电诈名单,全是高层权贵

水泥土的搞笑
2026-09-25 06:54:48
日美将举行大规模联合实战演习,日本最西端将首次部署美军新型岸舰导弹系统

日美将举行大规模联合实战演习,日本最西端将首次部署美军新型岸舰导弹系统

政知新媒体
2026-10-02 10:14:23
0-5不敌战乱国家!国足遇奇耻大辱性惨败,5大水货被揪出,央视解说沉默

0-5不敌战乱国家!国足遇奇耻大辱性惨败,5大水货被揪出,央视解说沉默

球盲百小易
2026-10-02 22:54:20
上海男子为和战友做一辈子兄弟,咬牙娶了战友42岁未嫁的姐姐

上海男子为和战友做一辈子兄弟,咬牙娶了战友42岁未嫁的姐姐

今日搞笑分享
2026-10-02 19:42:11
小到中雨局部大到暴雨,大连即将出现降雨降温

小到中雨局部大到暴雨,大连即将出现降雨降温

半岛晨报
2026-10-02 16:14:20
佩雷拉下一战,恐怕要把整个职业生涯赌进3分钟!谁先挨一拳,谁先玩完...

佩雷拉下一战,恐怕要把整个职业生涯赌进3分钟!谁先挨一拳,谁先玩完...

格斗时代
2026-10-02 09:16:22
熟女人妻街头穿搭,紧身瑜伽裤勾勒丰腴曲线简约灰调穿出松弛魅力

熟女人妻街头穿搭,紧身瑜伽裤勾勒丰腴曲线简约灰调穿出松弛魅力

只要高兴就好
2026-09-29 08:28:05
突发惨烈车祸! 澳华人夫妇双双丧生, 刚拿到PR建好新房!

突发惨烈车祸! 澳华人夫妇双双丧生, 刚拿到PR建好新房!

澳微Daily
2026-10-02 15:46:41
荷兰半导体专家:华为凭借大规模技术研发,从美国制裁的打击中活了过来,逻辑折叠技术正在引领中国芯片发展

荷兰半导体专家:华为凭借大规模技术研发,从美国制裁的打击中活了过来,逻辑折叠技术正在引领中国芯片发展

逍遥漠
2026-10-02 15:00:37
为什么都在宣传用了新能源车就回不去了?看网友评论:引万千共鸣

为什么都在宣传用了新能源车就回不去了?看网友评论:引万千共鸣

另子维爱读史
2026-08-04 21:35:07
刘国梁,为什么极尽资源培养王楚钦

刘国梁,为什么极尽资源培养王楚钦

中场阴谋家
2026-10-01 22:14:29
布鲁斯·威利斯近照曝光,患额颞叶痴呆后鲜少露面

布鲁斯·威利斯近照曝光,患额颞叶痴呆后鲜少露面

这里是美国
2026-09-30 13:51:33
豆浆竟是血脂杀手?医生紧急提醒:不想血管堵塞,这5样东西少吃

豆浆竟是血脂杀手?医生紧急提醒:不想血管堵塞,这5样东西少吃

刘哥谈体育
2026-10-01 20:14:39
怎样让它意外死才显得跟我没关系?网友:越不想养长得越好

怎样让它意外死才显得跟我没关系?网友:越不想养长得越好

普陀动物世界
2026-10-02 11:23:52
小米澎程锁单量大幅下滑,直播当众翻车惹的祸?

小米澎程锁单量大幅下滑,直播当众翻车惹的祸?

汽车有文化
2026-09-30 08:47:07
2026-10-03 03:52:49
DeepTech深科技 incentive-icons
DeepTech深科技
麻省理工科技评论独家合作
17331文章数 515223关注度
往期回顾 全部

科技要闻

“分手”15天后,华为与赛力斯签约新五年

头条要闻

李在明:若乌克兰拒不道歉 将采取进一步措施

头条要闻

李在明:若乌克兰拒不道歉 将采取进一步措施

体育要闻

30天30队·快船:被莱纳德挂在半空的未来?

娱乐要闻

潘玮柏老婆被猜怀二胎 中秋vlog露馅

财经要闻

珠宝黑马爆雷,老板全家跑路泰国!

汽车要闻

方程豹9月热销破4万 首款皮卡鲨鱼将于四季度上市

态度原创

本地
亲子
家居
公开课
军事航空

本地新闻

中秋逛白塔寺,体验国医妙荟雅集

亲子要闻

网传多地幼儿园男女比例失衡,男孩比女孩多3倍,网友说:以后性资源会出现巨大缺口!

家居要闻

2026建博会(广州) 公装联探展交流活动

公开课

李玫瑾:为什么性格比能力更重要?

军事要闻

胡塞武装:24小时内沙特空袭也门47次

无障碍浏览 进入关怀版