网易首页 > 网易号 > 正文 申请入驻

美团正式上线LongCat App,可体验语音通话等新功能

0
分享至


11月3日消息,美团LongCat团队今日宣布,LongCat-Flash 系列大模型再升级,正式发布全新家族成员——LongCat-Flash-Omni,并开源。

目前,新App已支持联网搜索、语音通话等功能,视频通话等功能会稍后上线;Web端则增加图片、文件上传和语音通话等功能。

iOS用户可直接在APP Store中搜索“LongCat”获取。

在此之前,LongCat仅通过官网(https://longcat.ai/)来为C端用户提供大模型的相关能力。


网页版

我们迅速下载该APP测试了一下,发现该模型最大的亮点,那就是“快”!(天下武功,唯快不破)

该模型总参数560B,激活参数仅27B,继承了LongCat-Flash系列“快”的基因,使其在保持庞大知识容量的同时,实现了极高的推理效率。

我们发现,从输入指令到生成token的时间间隔非常短暂,整个过程相当丝滑,小编感觉比豆包通义及微信元宝的反应速度都更快一些。

据悉,在当前主流旗舰模型的性能标准和参数规模下,这是首个能够实现全模态实时交互的开源模型,它能同时处理文本、图像、音频、视频,而且还能实时进行音视频交互。

据官方介绍,LongCat-Flash-Omni以LongCat-Flash系列的高效架构设计为基础(Shortcut-Connected MoE,含零计算专家),集成了高效多模态感知模块与语音重建模块,在总参数 5600 亿(激活参数 270 亿)的庞大参数规模下,仍实现低延迟的实时音视频交互能力,为开发者的多模态应用场景提供了更高效的技术选择。

美团采用了 Shortcut-connected MoE 架构,配合零计算专家(zero-computation experts)设计,就像高速公路上的ETC通道,让信息处理更高效,避免了“堵车”。


更重要的是,美团还提出了早期融合训练范式(Early-Fusion Training),能确保模型在获得多模态能力的同时,不会在单一模态上“偏科”。

并不是先语言训练,然后再后加上视觉或音频能力。这就像培养全能运动员,不能因为练游泳就忘了跑步,每天都要一起练,而不是先练两年游泳,然后再去学跑步。

这样的一体化架构,让这只“龙猫”实现了完全端到端的设计:视觉与音频编码器作为多模态感知器,LLM 直接处理输入并生成文本与语音 token,再通过轻量级音频解码器重建为自然语音波形。

此外,打开LongCat APP,从首页可以看到,它目前支持文字/语音两种输入方式,并能进行语音通话(视频通话功能正在跑步入场中),Web端还支持上传图片和文件。


APP端

在综合性的全模态基准测试(如Omni-Bench, WorldSense)上,超越Qwen3-Omni、Gemini-2.5-Flash,这款模型直接达到了开源SOTA水准(开源最先进水平),而且能和闭源的Gemini-2.5-Pro相媲美。 即使单拉出来文本、图像、音频、视频等各项模态能力,它也依旧能打(单项能力均位居开源模型前列),真正实现了“全模态不降智”。


文本:LongCat-Flash-Omni 延续了该系列卓越的文本基础能力,且在多领域均呈现领先性能。相较于 LongCat-Flash 系列早期版本,该模型不仅未出现文本能力的衰减,反而在部分领域实现了性能提升。这一结果不仅印证了该团队训练策略的有效性,更凸显出全模态模型训练中不同模态间的潜在协同价值。

图像理解:LongCat-Flash-Omni 的性能(RealWorldQA 74.8分)与闭源全模态模型 Gemini-2.5-Pro 相当,且优于开源模型 Qwen3-Omni;多图像任务优势尤为显著,核心得益于高质量交织图文、多图像及视频数据集上的训练成果。

音频能力:从自动语音识别(ASR)、文本到语音(TTS)、语音续写维度进行评估,Instruct Model 层面表现突出:ASR 在 LibriSpeech、AISHELL-1 等数据集上优于 Gemini-2.5-Pro;语音到文本翻译(S2TT)在 CoVost2 表现强劲;音频理解在 TUT2017、Nonspeech7k 等任务达当前最优;音频到文本对话在 OpenAudioBench、VoiceBench 表现优异,实时音视频交互评分接近闭源模型,类人性指标优于 GPT-4o,实现基础能力到实用交互的高效转化。

视频理解:LongCat-Flash-Omni 视频到文本任务性能达当前最优,短视频理解大幅优于现有参评模型,长视频理解比肩 Gemini-2.5-Pro 与 Qwen3-VL,这得益于动态帧采样、分层令牌聚合的视频处理策略,及高效骨干网络对长上下文的支持。

跨模态理解:性能优于 Gemini-2.5-Flash(非思考模式),比肩 Gemini-2.5-Pro(非思考模式);尤其在真实世界音视频理解WorldSense 基准测试上,相较其他开源全模态模型展现出显著的性能优势,印证其高效的多模态融合能力,是当前综合能力领先的开源全模态模型。

端到端交互:由于目前行业内尚未有成熟的实时多模态交互评估体系,LongCat团队构建了一套专属的端到端评测方案,该方案由定量用户评分(250 名用户评分)与定性专家分析(10 名专家,200 个对话样本)组成。


定量结果显示:围绕端到端交互的自然度与流畅度,LongCat-Flash-Omni 在开源模型中展现出显著优势 —— 其评分比当前最优开源模型 Qwen3-Omni 高出 0.56 分;定性结果显示:LongCat-Flash-Omni 在副语言理解、相关性与记忆能力三个维度与顶级模型持平,但是在实时性、类人性与准确性三个维度仍存在差距,也将在未来工作中进一步优化。

美团这款新发布模型也引发了外国网友的热议。其中有网友表示:“这家中国外卖公司可是大有来路,年营收高达数百亿美元,员工人数也超过 Meta,是那种可以把前沿模型开发当成副业来搞的巨头公司。”甚至点名扎克伯格:快来学着抄作业。



特别声明:以上内容(如有图片或视频亦包括在内)为自媒体平台“网易号”用户上传并发布,本平台仅提供信息存储服务。

Notice: The content above (including the pictures and videos if any) is uploaded and posted by a user of NetEase Hao, which is a social media platform and only provides information storage services.

相关推荐
热点推荐
三分14中8!东契奇狂轰38+11,末节微笑喷垃圾话尽显自信

三分14中8!东契奇狂轰38+11,末节微笑喷垃圾话尽显自信

大眼瞄世界
2026-02-21 22:59:27
仅差12分!NBA历史第一纪录诞生!前无古人后难来者,老詹太强了

仅差12分!NBA历史第一纪录诞生!前无古人后难来者,老詹太强了

篮球扫地僧
2026-02-22 17:24:06
《镖人》李云霄仅凭一句妩媚“小郎君”让你明白,什么叫媚骨天成

《镖人》李云霄仅凭一句妩媚“小郎君”让你明白,什么叫媚骨天成

亦暖追剧随笔
2026-02-21 15:11:47
高人预测:若不出意外,春节以后,国内将迎来4个变化,很现实

高人预测:若不出意外,春节以后,国内将迎来4个变化,很现实

咖啡店的老板娘
2026-02-22 11:44:50
一年流出视频294部的小宝到底探过多少朵花?

一年流出视频294部的小宝到底探过多少朵花?

挪威森林
2026-01-25 17:18:42
新春走基层·一线直击|打卡北京隆福寺:一篮年货 喜乐相伴

新春走基层·一线直击|打卡北京隆福寺:一篮年货 喜乐相伴

新华社
2026-02-20 22:19:21
军队采购严查内外勾结串通勾连问题,全国首家网络安全企业被终身禁止

军队采购严查内外勾结串通勾连问题,全国首家网络安全企业被终身禁止

审计之家
2026-02-22 09:09:57
9.5亿买一堆边角料!曼联今夏重建,B费逼宫红魔,卡里克走他就走

9.5亿买一堆边角料!曼联今夏重建,B费逼宫红魔,卡里克走他就走

体坛鉴春秋
2026-02-22 13:53:48
2026台湾县市长选举:民众党3席民进党6席国民党13席小输

2026台湾县市长选举:民众党3席民进党6席国民党13席小输

揽星辰入梦
2026-02-22 12:40:59
金球奖概率榜:梅西无缘前十!C罗排名高居前十五!

金球奖概率榜:梅西无缘前十!C罗排名高居前十五!

氧气是个地铁
2026-02-21 22:13:54
86岁老人随口乱说代号,儿子上报后,国安领导:马上接通中央部委

86岁老人随口乱说代号,儿子上报后,国安领导:马上接通中央部委

知鉴明史
2025-10-23 14:01:49
1比4惨败!陈熠遭遇崩盘,状态低迷令人惋惜,网友质疑经验不足

1比4惨败!陈熠遭遇崩盘,状态低迷令人惋惜,网友质疑经验不足

卿子书
2026-02-22 07:18:07
印度91岁僧人78年不吃不喝?军方在其房间装上监控,最终发现真相

印度91岁僧人78年不吃不喝?军方在其房间装上监控,最终发现真相

谈史论天地
2026-02-22 06:31:28
42岁王濛再破天花板!退役12年,再次让李琰和整个冰坛“沉默”了

42岁王濛再破天花板!退役12年,再次让李琰和整个冰坛“沉默”了

翰飞观事
2026-02-16 11:29:39
利好来了!000988,订单排到四季度!

利好来了!000988,订单排到四季度!

中国基金报
2026-02-22 13:42:45
金风科技这回没人能拦住了

金风科技这回没人能拦住了

蔚然先声
2026-02-22 08:31:55
贝加尔湖遇难中国游客身份全部确认:七条生命,一个破碎的春节

贝加尔湖遇难中国游客身份全部确认:七条生命,一个破碎的春节

青木说
2026-02-22 09:02:50
“茶几”正在退出中国家庭,学广东人这样做,实用性让人大开眼界

“茶几”正在退出中国家庭,学广东人这样做,实用性让人大开眼界

室内设计师有料儿
2026-02-19 11:17:18
在刚刚,12家公司出现重大利好消息,看看有没有与你相关的个股?

在刚刚,12家公司出现重大利好消息,看看有没有与你相关的个股?

股市皆大事
2026-02-22 15:02:57
重大错误,印制错误的韩国国旗被升起4次,国际奥委会已致歉

重大错误,印制错误的韩国国旗被升起4次,国际奥委会已致歉

懂球帝
2026-02-22 17:22:25
2026-02-22 18:59:00
科工力量 incentive-icons
科工力量
观察者网工业科技专栏
184文章数 533关注度
往期回顾 全部

科技要闻

马斯克:星舰每年将发射超过10000颗卫星

头条要闻

7名中国游客遗体从贝加尔湖被打捞出 俄罗斯外长致哀

头条要闻

7名中国游客遗体从贝加尔湖被打捞出 俄罗斯外长致哀

体育要闻

75673人见证!迈阿密0-3:梅西孙兴慜过招

娱乐要闻

裴世矩养侄为刃 看懂两次放行裴行俨!

财经要闻

特朗普新加征关税税率从10%提升至15%

汽车要闻

续航1810km!smart精灵#6 EHD超级电混2026年上市

态度原创

家居
本地
旅游
游戏
时尚

家居要闻

本真栖居 爱暖伴流年

本地新闻

春花齐放2026:《骏马奔腾迎新岁》

旅游要闻

春节,盐城珠溪古镇奇幻花灯带你入画

部分地区已提前收到《宝可梦:火红·叶绿》兑换码

50岁女性过冬穿搭:有大衣和羽绒服就够了,简约从容才是优雅

无障碍浏览 进入关怀版