网易首页 > 网易号 > 正文 申请入驻

思必驰发布天机Fusion多模态大模型交互系统,加速具身智能规模化落地

0
分享至

当具身智能机器人走进展厅、工厂和家庭等场景,需要面对的不再是安静、标准、单一的实验室环境,而是人声交织、设备轰鸣、人员移动、任务随时变化的真实世界。

思必驰推出的具身机器人解决方案——天机Fusion多模态大模型交互系统,作为机器人交互中枢,把语音、视觉、表情、手势、环境信息与大模型能力连接起来,提供从前端感知、语义理解到任务执行的系统级底座,让机器人在移动、远场、多人、强噪声等场景中,也能更自然地完成交流与服务。

智能聆听:在真实环境里听得清

天机系统提供RM1、RM2多模态语音交互模组及R41纯语音交互模组,集成麦克风阵列、声卡、功放、回采、网络接口与系统驱动支持,可适配人形机器人、服务机器人、扫地机器人、零售机器人、展厅讲解机器人等多种形态。

针对人形机器人弧形结构和运动特性,天机系统支持离散型环形麦克风阵列,更贴合机身结构与密封需求。配合深度学习语音增强、回声消除、AI去混响、声纹降噪、说话人分离、声源定位与人声聚焦等能力,机器人可以在3-5米远场、360°范围内捕捉声音,并在嘈杂环境中锁定真正的交互对象。

智能理解:听见后知道该回应谁

机器人在公共服务和商业接待场景中,经常会遇到多人同时说话、旁人干扰、背景广播、用户未正对设备等情况。天机系统将语谱、波束、视觉唇动等特征进行融合建模,并结合唤醒信息、视线方向、手势动作、人脸识别和中枢拒识判断,帮助机器人判断“谁在对我说话”、“这句话是否需要回应”。

这让交互从单一语音识别走向多模态理解。用户不必总是站到固定位置、反复唤醒或用标准句式表达需求;机器人也不只是机械执行一条指令,而是结合场景上下文,理解人的意图、状态和交互目标。对于展厅导览、交通枢纽问询、园区接待、家庭陪伴等场景,这种能力直接影响机器人服务是否自然、可信、可持续。

智能响应:让机器人从“会说话”向“会协同”

具身智能需要的不是孤立的大模型问答,而是可以调度工具、连接业务、执行任务的智能体系统。天机系统基于思必驰自研“1+N”分布式智能体架构,由中枢大模型负责意图理解、任务拆解和工具调度,协同迎宾接待、展厅讲解、设备控制、AI引导、百科问答等垂域智能体,并支持客户自研大模型或第三方大模型接入。

依托DUI智能化定制中台,机器人厂商可以围绕自身产品、行业知识、业务流程和场景接口,快速构建可复用、可扩展、可热插拔的智能体应用。换句话说,天机系统不只是让机器人“答得上”,更希望帮助机器人“用得上”——能够接住真实需求,完成导览、问答、巡检、控制、提醒等具体任务。

有温度的交互:让机器人更懂人

除了听清和执行,具身机器人还需要更接近人的表达方式。思必驰天机系统把人脸识别、手势控制、眼神唤醒、语音唤醒等能力纳入交互入口,让机器人能够主动“看见”用户、判断用户是否有交互意图,而不是被动等待一句标准唤醒词。

在“听”的层面,焦点聚焦模式可支持目标说话人锁定与增强,尽量滤除非目标说话人的干扰;全景扫描模式则可对画面中的多个说话人进行实时分离与识别。当用户戴口罩、说话被遮挡,或现场存在背景音乐、主持声、其他观众交谈时,系统能够通过遮挡检测与智能模式切换,帮助机器人稳定捕捉真正需要回应的声音,让交流不因环境复杂而中断。

真正有温度的交互,还体现在机器人能不能“记得我、理解我、回应我”。天机系统将身份识别、个性化推荐、大模型情绪感知与反馈纳入方案设计,可结合人脸识别、微表情分析、视线方向判断、用户轨迹记忆和语义上下文,判断用户的兴趣点、情绪状态与当前需求。当机器人再次遇到同一位用户时,可以调整问候方式、推荐内容、语速语调和回应节奏;当用户表现出犹豫、好奇或焦急时,也能用更合适的声音情绪和反馈方式承接交流。

这意味着机器人不再只是执行命令的设备,而可以成为更自然的服务入口:在展厅里,它可以根据参观者兴趣调整讲解;在公共空间里,它可以更友好地回应问询;在家庭场景中,它可以逐渐理解不同成员的习惯。

案例落地:智元精灵G2的“声智协同”

思必驰为智元精灵G2提供软硬一体化语音方案,采用离散型环四麦克风阵列与智慧降噪技术,实现360°精准拾音与嘈杂环境抗干扰。基于AISPEECH DFM大模型构建面向智能终端的1+N分布式智能体系统,支持多语种互译与多场景定制交互,目前已落地2025全运会引导、展厅讲解等场景。整套方案以端到端全链路技术保障低延迟响应,助力机器人实现“听得清、听得懂、执行准”的高效交互,赋能产业场景智能化升级。



作为国内领先的对话式人工智能平台型企业,思必驰专注于全栈对话式AI和端侧智能技术的自主研发,围绕算法模型、端侧部署和柔性交付三大维度,构建了全栈对话式AI技术体系,覆盖“软件-芯片-模组-终端”的产品服务体系,已经在智慧物联、智慧办公、智慧出行等领域实现规模化应用。在智慧物联领域,思必驰已与众多各细分行业的头部企业建立深度合作,覆盖智能家居、智能机器人、智能穿戴、消费电子等多个垂直领域。



从“能听会说”到“思考会做”,具身智能需要的不只是一颗大脑,更是一套连接感知、认知、表达与执行的系统。面向未来,思必驰将继续围绕全链路对话式AI、端侧智能、多模态交互和分布式智能体等维度,携手机器人产业伙伴,把更自然、更可靠、更可规模化的人机交互带入家庭、商业服务、工业制造和更多真实场景。

特别声明:以上内容(如有图片或视频亦包括在内)为自媒体平台“网易号”用户上传并发布,本平台仅提供信息存储服务。

Notice: The content above (including the pictures and videos if any) is uploaded and posted by a user of NetEase Hao, which is a social media platform and only provides information storage services.

相关推荐
热点推荐
乒乓爆大冷!世界亚军被淘汰,莫雷加德剃光头,F勒布伦4-0零封

乒乓爆大冷!世界亚军被淘汰,莫雷加德剃光头,F勒布伦4-0零封

艳儿说电影
2026-10-17 16:31:13
昔日貌美校花被丈夫养至330斤,睡塌两张床,丈夫坦言怕她被抢走

昔日貌美校花被丈夫养至330斤,睡塌两张床,丈夫坦言怕她被抢走

老娱记啊
2026-10-13 15:12:28
电磁弹射的代价:为何“福建”号常规动力无法支撑中国的远洋野心

电磁弹射的代价:为何“福建”号常规动力无法支撑中国的远洋野心

孤城落叶
2026-10-16 17:06:55
8GB内存终于够用了!微软官宣:Windows 11大提速20%

8GB内存终于够用了!微软官宣:Windows 11大提速20%

快科技
2026-10-16 15:24:24
688689,拟重大股权收购!RISC-V重磅峰会将举办,产业空间有望超2000亿元,多只概念股砸出“深坑”

688689,拟重大股权收购!RISC-V重磅峰会将举办,产业空间有望超2000亿元,多只概念股砸出“深坑”

数据宝
2026-10-17 12:48:56
罕见低头!泽连斯基首次公开认栽:打了这么多年仗,我犯了无数错

罕见低头!泽连斯基首次公开认栽:打了这么多年仗,我犯了无数错

老马拉车莫少装
2026-09-24 21:22:49
去社保局一问,心凉了半截:灵活就业的人,这回真得算算账了

去社保局一问,心凉了半截:灵活就业的人,这回真得算算账了

白米饭怎么吃
2026-09-29 07:44:53
胃癌“源头”已发现,油炸没上榜,第一种很多人可能每天都在吃!

胃癌“源头”已发现,油炸没上榜,第一种很多人可能每天都在吃!

医学原创故事会
2026-10-16 20:46:15
民调:若勒庞赢得总统大选,近半数居住在法国的穆斯林会考虑离开

民调:若勒庞赢得总统大选,近半数居住在法国的穆斯林会考虑离开

像梦一场a
2026-10-17 10:22:56
新版湖人不敌克星!东里11失误遭一招锁死,1.3亿新援成约胖玩具

新版湖人不敌克星!东里11失误遭一招锁死,1.3亿新援成约胖玩具

锅子篮球
2026-10-17 14:11:02
快手做出大爆款,估值1200亿,即将上市

快手做出大爆款,估值1200亿,即将上市

科技头版Pro
2026-10-16 10:06:59
汪小菲与两个截然不同女人结婚,各自抱着孩子合照,看着有点感慨

汪小菲与两个截然不同女人结婚,各自抱着孩子合照,看着有点感慨

大眼妹妹
2026-10-16 17:01:49
泽连斯基是独裁者,但普京不是?特朗普做交易的本质:损人利己

泽连斯基是独裁者,但普京不是?特朗普做交易的本质:损人利己

鹰眼Defence
2026-10-16 16:52:03
社保开始大数据倒查!挂靠、违规补缴,旧账终身追溯!

社保开始大数据倒查!挂靠、违规补缴,旧账终身追溯!

职场资深秘书
2026-10-17 12:22:57
女排世界杯分组抽签时间揭晓,中国志在前三,俄罗斯被拒绝参赛

女排世界杯分组抽签时间揭晓,中国志在前三,俄罗斯被拒绝参赛

黄小仙的搞笑视频
2026-10-17 16:49:10
当郭宇欣和徐若晗同框,全程拘谨小动作,才懂明星和短剧演员差别

当郭宇欣和徐若晗同框,全程拘谨小动作,才懂明星和短剧演员差别

阿伧说事
2026-10-16 13:01:22
国乒新大敌!张本美和联手哥哥打混双:孙颖莎王楚钦迎最大挑战

国乒新大敌!张本美和联手哥哥打混双:孙颖莎王楚钦迎最大挑战

李喜林篮球绝杀
2026-10-16 14:41:54
身家1.8w亿的豪门最卷阔太,怎么把自己整成了恐怖片啊?!

身家1.8w亿的豪门最卷阔太,怎么把自己整成了恐怖片啊?!

英国那些事儿
2026-10-16 00:58:49
6天输光近3亿,毁掉黄有龙的并非赵薇,而是他那当园区老大的表弟

6天输光近3亿,毁掉黄有龙的并非赵薇,而是他那当园区老大的表弟

完善法
2026-10-10 18:00:17
留洋暂停!樊振东回国不到1天,正式官宣新身份,终于等到这一天

留洋暂停!樊振东回国不到1天,正式官宣新身份,终于等到这一天

铁锤简科
2026-10-17 15:44:03
2026-10-17 17:31:00
小石同学
小石同学
一颗分享日常生活的小石头
733文章数 14关注度
往期回顾 全部

科技要闻

刘煜辉:99%的黄金分析师报告一钱不值

头条要闻

男子服刑七年 出狱后发现账户里数十万资金仅剩6.43元

头条要闻

男子服刑七年 出狱后发现账户里数十万资金仅剩6.43元

体育要闻

高级货,真高级

娱乐要闻

黄子韬儿子国籍争议,遭知名演员点名

财经要闻

新一轮大跌源头,找到了!

汽车要闻

特斯拉会飞?全新Roadster亮相

态度原创

游戏
本地
房产
公开课
军事航空

《堕落之主2》确认大尺度暴力血腥!处决动画包多包爽

本地新闻

因新荣记出圈,这座浙东小城才是吃货天堂

房产要闻

利好密集落地+现房好房断档,广州楼市买入窗口,正在倒计时!

公开课

李玫瑾:为什么性格比能力更重要?

军事要闻

“星盾”限速事件加剧美乌裂痕

无障碍浏览 进入关怀版