网易首页 > 网易号 > 正文 申请入驻

思必驰发布天机Fusion多模态大模型交互系统,加速具身智能规模化落地

0
分享至

当具身智能机器人走进展厅、工厂和家庭等场景,需要面对的不再是安静、标准、单一的实验室环境,而是人声交织、设备轰鸣、人员移动、任务随时变化的真实世界。

思必驰推出的具身机器人解决方案——天机Fusion多模态大模型交互系统,作为机器人交互中枢,把语音、视觉、表情、手势、环境信息与大模型能力连接起来,提供从前端感知、语义理解到任务执行的系统级底座,让机器人在移动、远场、多人、强噪声等场景中,也能更自然地完成交流与服务。

智能聆听:在真实环境里听得清

天机系统提供RM1、RM2多模态语音交互模组及R41纯语音交互模组,集成麦克风阵列、声卡、功放、回采、网络接口与系统驱动支持,可适配人形机器人、服务机器人、扫地机器人、零售机器人、展厅讲解机器人等多种形态。

针对人形机器人弧形结构和运动特性,天机系统支持离散型环形麦克风阵列,更贴合机身结构与密封需求。配合深度学习语音增强、回声消除、AI去混响、声纹降噪、说话人分离、声源定位与人声聚焦等能力,机器人可以在3-5米远场、360°范围内捕捉声音,并在嘈杂环境中锁定真正的交互对象。

智能理解:听见后知道该回应谁

机器人在公共服务和商业接待场景中,经常会遇到多人同时说话、旁人干扰、背景广播、用户未正对设备等情况。天机系统将语谱、波束、视觉唇动等特征进行融合建模,并结合唤醒信息、视线方向、手势动作、人脸识别和中枢拒识判断,帮助机器人判断“谁在对我说话”、“这句话是否需要回应”。

这让交互从单一语音识别走向多模态理解。用户不必总是站到固定位置、反复唤醒或用标准句式表达需求;机器人也不只是机械执行一条指令,而是结合场景上下文,理解人的意图、状态和交互目标。对于展厅导览、交通枢纽问询、园区接待、家庭陪伴等场景,这种能力直接影响机器人服务是否自然、可信、可持续。

智能响应:让机器人从“会说话”向“会协同”

具身智能需要的不是孤立的大模型问答,而是可以调度工具、连接业务、执行任务的智能体系统。天机系统基于思必驰自研“1+N”分布式智能体架构,由中枢大模型负责意图理解、任务拆解和工具调度,协同迎宾接待、展厅讲解、设备控制、AI引导、百科问答等垂域智能体,并支持客户自研大模型或第三方大模型接入。

依托DUI智能化定制中台,机器人厂商可以围绕自身产品、行业知识、业务流程和场景接口,快速构建可复用、可扩展、可热插拔的智能体应用。换句话说,天机系统不只是让机器人“答得上”,更希望帮助机器人“用得上”——能够接住真实需求,完成导览、问答、巡检、控制、提醒等具体任务。

有温度的交互:让机器人更懂人

除了听清和执行,具身机器人还需要更接近人的表达方式。思必驰天机系统把人脸识别、手势控制、眼神唤醒、语音唤醒等能力纳入交互入口,让机器人能够主动“看见”用户、判断用户是否有交互意图,而不是被动等待一句标准唤醒词。

在“听”的层面,焦点聚焦模式可支持目标说话人锁定与增强,尽量滤除非目标说话人的干扰;全景扫描模式则可对画面中的多个说话人进行实时分离与识别。当用户戴口罩、说话被遮挡,或现场存在背景音乐、主持声、其他观众交谈时,系统能够通过遮挡检测与智能模式切换,帮助机器人稳定捕捉真正需要回应的声音,让交流不因环境复杂而中断。

真正有温度的交互,还体现在机器人能不能“记得我、理解我、回应我”。天机系统将身份识别、个性化推荐、大模型情绪感知与反馈纳入方案设计,可结合人脸识别、微表情分析、视线方向判断、用户轨迹记忆和语义上下文,判断用户的兴趣点、情绪状态与当前需求。当机器人再次遇到同一位用户时,可以调整问候方式、推荐内容、语速语调和回应节奏;当用户表现出犹豫、好奇或焦急时,也能用更合适的声音情绪和反馈方式承接交流。

这意味着机器人不再只是执行命令的设备,而可以成为更自然的服务入口:在展厅里,它可以根据参观者兴趣调整讲解;在公共空间里,它可以更友好地回应问询;在家庭场景中,它可以逐渐理解不同成员的习惯。

案例落地:智元精灵G2的“声智协同”

思必驰为智元精灵G2提供软硬一体化语音方案,采用离散型环四麦克风阵列与智慧降噪技术,实现360°精准拾音与嘈杂环境抗干扰。基于AISPEECH DFM大模型构建面向智能终端的1+N分布式智能体系统,支持多语种互译与多场景定制交互,目前已落地2025全运会引导、展厅讲解等场景。整套方案以端到端全链路技术保障低延迟响应,助力机器人实现“听得清、听得懂、执行准”的高效交互,赋能产业场景智能化升级。



作为国内领先的对话式人工智能平台型企业,思必驰专注于全栈对话式AI和端侧智能技术的自主研发,围绕算法模型、端侧部署和柔性交付三大维度,构建了全栈对话式AI技术体系,覆盖“软件-芯片-模组-终端”的产品服务体系,已经在智慧物联、智慧办公、智慧出行等领域实现规模化应用。在智慧物联领域,思必驰已与众多各细分行业的头部企业建立深度合作,覆盖智能家居、智能机器人、智能穿戴、消费电子等多个垂直领域。



从“能听会说”到“思考会做”,具身智能需要的不只是一颗大脑,更是一套连接感知、认知、表达与执行的系统。面向未来,思必驰将继续围绕全链路对话式AI、端侧智能、多模态交互和分布式智能体等维度,携手机器人产业伙伴,把更自然、更可靠、更可规模化的人机交互带入家庭、商业服务、工业制造和更多真实场景。

特别声明:以上内容(如有图片或视频亦包括在内)为自媒体平台“网易号”用户上传并发布,本平台仅提供信息存储服务。

Notice: The content above (including the pictures and videos if any) is uploaded and posted by a user of NetEase Hao, which is a social media platform and only provides information storage services.

相关推荐
热点推荐
第二个许家印!又一首富栽了!世界500强竟是假的,千亿帝国清零

第二个许家印!又一首富栽了!世界500强竟是假的,千亿帝国清零

米果说识
2026-07-06 19:32:42
罗马诺:皇马已经要求卡洛斯-埃斯皮等待他们的行动

罗马诺:皇马已经要求卡洛斯-埃斯皮等待他们的行动

懂球帝
2026-07-31 03:54:07
1973年,广西舞蹈演员自称毛泽东的女儿,主席得知后:我想见见她

1973年,广西舞蹈演员自称毛泽东的女儿,主席得知后:我想见见她

大运河时空
2026-07-29 10:15:03
新冠病毒高发期!医生建议:家里常备这2种药,关键时刻能救命

新冠病毒高发期!医生建议:家里常备这2种药,关键时刻能救命

健康之光
2026-07-28 17:20:09
姆巴佩27岁牵手西班牙国宝级女星

姆巴佩27岁牵手西班牙国宝级女星

手工制作阿歼
2026-07-31 01:36:09
日本皇室“纯爱故事”再来!爱子公主与竹马约会,民众大力支持

日本皇室“纯爱故事”再来!爱子公主与竹马约会,民众大力支持

这里是东京
2026-07-29 17:38:21
男性“最耗阳”行为,不是喝酒而是这些,排第一的,看看你在做吗

男性“最耗阳”行为,不是喝酒而是这些,排第一的,看看你在做吗

熊猫医学社
2026-06-30 11:30:03
7月19日刚交了20000多元,25日就突发闭店!知名品牌两门店停摆!回应:没跑路,经营承压,正积极化解

7月19日刚交了20000多元,25日就突发闭店!知名品牌两门店停摆!回应:没跑路,经营承压,正积极化解

鲁中晨报
2026-07-28 16:32:08
我年轻时向一个要好的姑娘表白,她说:想多了吧,我把你当好哥们

我年轻时向一个要好的姑娘表白,她说:想多了吧,我把你当好哥们

秀秀情感课堂
2026-07-30 13:50:08
百姓躺平摆烂,食税群体怎么办?

百姓躺平摆烂,食税群体怎么办?

律法刑道
2026-06-03 09:30:48
龚孟建当选山西长治市市长

龚孟建当选山西长治市市长

界面新闻
2026-07-30 13:18:10
农行、中行、建行、华夏银行等出手,5年期大额存单“重出江湖”,利率最高1.8%!有人赶紧存20万元:跟捡漏似的

农行、中行、建行、华夏银行等出手,5年期大额存单“重出江湖”,利率最高1.8%!有人赶紧存20万元:跟捡漏似的

每日经济新闻
2026-07-30 14:41:04
中日要有重头戏,高市将借机访华?中方已换将,日本需满足一要求

中日要有重头戏,高市将借机访华?中方已换将,日本需满足一要求

寻迹追心
2026-07-30 05:23:19
憔悴全写在脸上!诗妮娜出席公务状态大不如前,回泰几天忙得飞起

憔悴全写在脸上!诗妮娜出席公务状态大不如前,回泰几天忙得飞起

动物奇奇怪怪
2026-07-31 00:52:18
SpaceX猎鹰9号火箭下月撞击月球,科学家预计可观测到喷射羽流

SpaceX猎鹰9号火箭下月撞击月球,科学家预计可观测到喷射羽流

IT之家
2026-07-30 21:37:11
茄子再次被关注!医生含泪警告:茄子尽量别这样吃,比砒霜还毒

茄子再次被关注!医生含泪警告:茄子尽量别这样吃,比砒霜还毒

老李讲健康
2026-07-29 18:00:03
正史一字不提,野史写到起飞

正史一字不提,野史写到起飞

我是历史其实挺有趣
2026-07-30 10:24:38
阿根廷4600万人口,拥有超1500万辆汽车,福建4200万人有多少?

阿根廷4600万人口,拥有超1500万辆汽车,福建4200万人有多少?

抽象派大师
2026-07-29 16:26:26
研究发现:一旦吃上降压药,3件事就别做了,不要害了自己?

研究发现:一旦吃上降压药,3件事就别做了,不要害了自己?

小胡军事爱好
2026-07-30 19:20:25
俄罗斯军事专家:“全世界,只有中国自己不知道自己有多么强大”

俄罗斯军事专家:“全世界,只有中国自己不知道自己有多么强大”

农夫史记
2026-05-23 21:16:39
2026-07-31 04:48:49
小石同学
小石同学
一颗分享日常生活的小石头
697文章数 14关注度
往期回顾 全部

科技要闻

小米澎程N90 Max预售价29.99万

头条要闻

陕西"公公强奸儿媳案"维持原判 女方精神鉴定结果公布

头条要闻

陕西"公公强奸儿媳案"维持原判 女方精神鉴定结果公布

体育要闻

曝皇马将签罗德里!转会费6000万签约4年

娱乐要闻

周星驰用态度打破快餐式宣发

财经要闻

中共中央政治局:提升资本市场韧性和信心

汽车要闻

FREELANDER神行者8下线 8月10日开启预售/海外版同步推进

态度原创

教育
游戏
亲子
旅游
公开课

教育要闻

数字太大,不会做的人太多,放现在很多同学还是不会计算

搜打撤对不过枪的我,换近战武器砍翻了所有人

亲子要闻

儿童白血病患者越来越多,医生警告:家里这几种东西,一定要注意

旅游要闻

这场校园里的夏日旅行 让华裔少年在大理读懂中华文化

公开课

李玫瑾:为什么性格比能力更重要?

无障碍浏览 进入关怀版