网易首页 > 网易号 > 正文 申请入驻

RSS 2025 软硬件全开源,智源清华带来混动灵巧脸Morpheus

0
分享至


人机情感交互进入一个全新的阶段。

作者丨清华AIR 赵昊团队

机器人也能拥有“表情管理”?传统机械面部系统长期受限于硬件结构单一、控制算法死板常常难以实现细腻丰富的情感表达。如今,这一局面有望被彻底改写。近日,清华大学智能产业研究院(AIR)的赵昊团队,联合北京智源研究院(BAAI)、清华大学交叉信息研究院(IIIS)、北京航空航天大学、华大等多家机构,共同发布了名为Morpheus的高拟真机器人面部系统。Morpheus首次融合“混合驱动结构”、“自学习逆向建模”与“语音驱动情绪动画”三项关键技术,能够实时生成多种细腻表情。实验数据显示,它在情绪识别准确率、唇形同步误差、以及用户对自然度的主观评价等核心指标上均表现出色,标志着人机情感交互进入一个全新的阶段。

Project Page:https://jiawenyang-ch.github.io/Morpheus-Hardware-Design/

arXiv:https://arxiv.org/abs/2507.16645


Morpheus整体图:(a) 前视图与面部自由度;(b) 侧视图与脖子自由度;(c) Morpheus以开心的语气讲出“welcome!”

01

三大创新突破传统瓶颈

  • 语音驱动情绪动画框架,让机器人“听懂”情绪:

    基于 Transformer 的情绪-内容解耦,将输入语音分离为“语义内容”与“情绪特征”。结合情绪引导注意力机制,动态调整表情权重,生成 33 维 blendshape 系数。利用DTW(动态时间规整)技术,确保长句推理时唇形、情绪同步零滞后。


语音驱动生成面部表情的机制与自建模网络框架

  • 混合驱动硬件平台“刚柔并济”

    33 个舵机融合「刚性机构+线驱动」双重优势:眼部、口部等关键区域采用刚性驱动确保精准控制;鼻部、面颊等微表情区域采用线驱动,实现细腻纹理变化。硬件结构紧凑,3D 打印一体成型。纯刚性驱动无法处理细腻表情,纯线驱动则稳定性不足,Morpheus的混合设计结合两者优势,在紧凑空间内实现高自由度表情控制。


Morpheus机械结构设计:(a)前视图;(b)侧视图(外骨骼透明化);(c) Morpheus四模块:眉毛模块、眼睛模块、嘴模块、脖子模块。

硬件安装视频

  • 自建模学习网络,让机器人“学会”表情

通过自建模,利用 MLP 网络在 5000 组随机电机指令—面部关键点数据中自动学习“电机空间→表情空间”的复杂非线性映射。只需输入目标表情即可实时求解任意虚拟表情的电机指令,无需人工标定。

02

情绪判断与唇形同步方面表现

Morpheus的突破不仅停留在技术概念层面,更通过严苛的实验数据证明了其性能表现。研究团队从三个维度进行深度解析:

  • 情绪识别:

在“快乐、愤怒、厌恶、恐惧”四类测试中,快乐(90%)和愤怒(91%)的表情,其准确率较高,这反映了Morpheus生成动态且富有表现力动作的强大能力。而对于厌恶(66%)和恐惧(73%)的表情,相对较低的准确率表明这些表情更容易被混淆,表明它们之间的差异不够明显。


  • 唇形同步:

模型在RAVDESS(有情绪)和HDTF(无情绪)语音上均实现了最低的LVE和EVE评分,这表明其在唇形同步性和情感表达方面具有卓越性能。


  • 不同驱动的效果比较

研究人员比较了不同驱动模式(仅驱动嘴部、仅驱动眉毛、仅驱动刚性机构、混合驱动)在快乐下的表情结果,脸颊和鼻翼的细微表情运动幅度差异,表明了混合驱动的有效性。



03

Morpheus 25 种表情演绎

Morpheus的表情库不仅仅停留在基础的"喜怒哀乐",而是实现了25种精细表情的生成,覆盖日常交流、极端情绪甚至微妙微表情。表情不仅包括Ekman的六大基本情绪理论中的快乐(Happy)、悲伤(Sad)、愤怒(Angry)、恐惧(Fear)、厌恶(Disgust),还包括怀疑、满足、尴尬、害羞等表达复杂感情的复杂表情。


Morpheus生成的25个表情

04

语音驱动的表情生成结果

为了让读者更直观地感受 Morpheus 的情感张力,研究团队同步放出了多段 4K 高清演示视频(已上传至 YouTube 与 GitHub Release)。以下为核心片段一览:

Look at the sky

I'm going to the store.

I need to work late tonight.

I lost my keys.

The weather is changing.

It's time to eat.

The food smells good.

This is exactly what I've come to expect from you.

(更多视频请参考Project page网站:https://jiawenyang-ch.github.io/Morpheus-Hardware-Design/ )

05

更多技术细节

  • 微型低噪舵机驱动

研究驱动方案主要采用了Guohua 9g舵机,工作噪音为45-50dB,比通用舵机MG90s的50-60dB噪音更小,同时提供超后者4倍的扭矩。

  • 零度硅胶脸皮

脸皮采用零度硅胶材料,最贴近人脸硬度,是仿人体产品最常用的材料。通过对比多种厚度的受力变形效果,研究最终选择了4mm厚度的脸皮。



  • 算法计算效率高

系统在NVIDIA Jetson AGX Xavier上以约150帧/秒的速度进行推理,以30帧/秒的速度生成虚拟表情,并以50Hz的频率控制舵机,从而实现虚拟表情与真实表情之间流畅且同步的对齐。

06

为下一代情感机器人奠定技术基座

Morpheus 不仅证明了“混合驱动+自学习”在复杂情感交互任务上的工业级可行性,更为未来机器人面部系统提供了可复用的技术栈。从实验室到量产,今天,Morpheus 让机器人拥有了“可量产、可进化”的表情;明天,它将把每一次微笑、每一次挑眉都沉淀为全人类共用的情感基础设施·。下一代情感机器人,不再是一座孤岛,而是一片可生长、可分享的新大陆。

未经「AI科技评论」授权,严禁以任何方式在网页、论坛、社区进行转载!

公众号转载请先在「AI科技评论」后台留言取得授权,转载时需标注来源并插入本公众号名片。

特别声明:以上内容(如有图片或视频亦包括在内)为自媒体平台“网易号”用户上传并发布,本平台仅提供信息存储服务。

Notice: The content above (including the pictures and videos if any) is uploaded and posted by a user of NetEase Hao, which is a social media platform and only provides information storage services.

相关推荐
热点推荐
加纳乔被换下后显不满,球迷批:别以为踢90分钟是理所当然

加纳乔被换下后显不满,球迷批:别以为踢90分钟是理所当然

雷速体育
2025-11-02 12:47:25
成龙主动招呼刘亦菲来合影,她穿紧身瑜伽裤三角区不明显,她很瘦

成龙主动招呼刘亦菲来合影,她穿紧身瑜伽裤三角区不明显,她很瘦

郑丁嘉话
2025-11-01 09:20:18
黑人爱瑞娶湖南姑娘定居农村,拍视频吸粉176万,网友:回非洲吧

黑人爱瑞娶湖南姑娘定居农村,拍视频吸粉176万,网友:回非洲吧

谈史论天地
2025-10-31 13:47:11
国家能源局:低谷充电高峰卖电,“零成本负成本”养车成可能

国家能源局:低谷充电高峰卖电,“零成本负成本”养车成可能

南方都市报
2025-10-31 17:47:31
山东一民企拒绝当地政府入股,被一纸通知强行接管!

山东一民企拒绝当地政府入股,被一纸通知强行接管!

霹雳炮
2025-11-02 20:49:43
英国游客吃烧烤没给钱,次日带翻译来道歉,摊主一句话老外瞪大眼睛

英国游客吃烧烤没给钱,次日带翻译来道歉,摊主一句话老外瞪大眼睛

卡西莫多的故事
2025-11-02 14:02:25
悬念揭晓!山东泰山核心外援瓦科去向曝光,曝江南球队或2选1

悬念揭晓!山东泰山核心外援瓦科去向曝光,曝江南球队或2选1

璞玉话体坛
2025-11-02 19:49:43
17.64亿!理想MEGA召回预估成本创纪录,主动担责撬动行业规范变革|封面独家

17.64亿!理想MEGA召回预估成本创纪录,主动担责撬动行业规范变革|封面独家

封面新闻
2025-11-01 10:21:03
好久没见到这样又美又飒的小姐姐了,瑜伽裤一穿,清纯又动感

好久没见到这样又美又飒的小姐姐了,瑜伽裤一穿,清纯又动感

小乔古装汉服
2025-11-02 16:54:11
郭碧婷41岁生日素颜出镜,老爸罕见露面破传闻,闺蜜夕又米更抢镜

郭碧婷41岁生日素颜出镜,老爸罕见露面破传闻,闺蜜夕又米更抢镜

TVB的四小花
2025-11-02 15:51:08
加帅不敢相信:罚丢点球,无缘登顶,迪巴拉成为大罪人

加帅不敢相信:罚丢点球,无缘登顶,迪巴拉成为大罪人

足球狗说
2025-11-03 06:15:25
欧盟内讧!匈牙利斯洛伐克捷克三国联手,或公开成立反乌克兰联盟

欧盟内讧!匈牙利斯洛伐克捷克三国联手,或公开成立反乌克兰联盟

时尚的弄潮
2025-11-03 05:53:24
上海一大学青年教师王猛去世,终年仅42岁,履历优秀让人惋惜

上海一大学青年教师王猛去世,终年仅42岁,履历优秀让人惋惜

凯旋学长
2025-11-02 22:51:06
左权之妻刘志兰:后改嫁给左权生前的秘书,1967年参与山西夺权

左权之妻刘志兰:后改嫁给左权生前的秘书,1967年参与山西夺权

红梦史说
2025-11-01 09:19:27
86岁老人随口乱说代号,儿子上报后,国安领导:马上接通中央部委

86岁老人随口乱说代号,儿子上报后,国安领导:马上接通中央部委

知鉴明史
2025-10-23 14:01:49
英国火车袭击案嫌疑人身份公布

英国火车袭击案嫌疑人身份公布

新京报
2025-11-02 19:56:20
雷军这波“自杀式公关”,暴露了小米的流量焦虑

雷军这波“自杀式公关”,暴露了小米的流量焦虑

热点菌本君
2025-11-02 15:26:23
中国近视防控火遍全球!3大绝招让近视率暴跌52%,WHO纳入指南

中国近视防控火遍全球!3大绝招让近视率暴跌52%,WHO纳入指南

孟大夫之家1
2025-10-30 18:59:06
5-4险胜、5-1血洗!女足世界杯杀疯了:朝鲜横扫日本,4强决出2席

5-4险胜、5-1血洗!女足世界杯杀疯了:朝鲜横扫日本,4强决出2席

大秦壁虎白话体育
2025-11-02 10:55:36
陈志究竟是谁的棋子?

陈志究竟是谁的棋子?

犀利辣椒
2025-11-02 06:21:35
2025-11-03 07:08:49
AI科技评论 incentive-icons
AI科技评论
点评学术,服务AI
6963文章数 20703关注度
往期回顾 全部

科技要闻

10月零跑突破7万辆,小鹏、蔚来超4万辆

头条要闻

马来西亚首富之子买上海大平层 449平米1.17亿元

头条要闻

马来西亚首富之子买上海大平层 449平米1.17亿元

体育要闻

这个日本人,凭啥值3.25亿美元?

娱乐要闻

陈道明被王家卫说他是阴阳同体的极品

财经要闻

段永平捐了1500万元茅台股票!本人回应

汽车要闻

神龙汽车推出“发动机终身质保”政策

态度原创

数码
亲子
家居
教育
军事航空

数码要闻

麒麟9030处理器突然曝光:1+4+4六核狂飙,可惜工艺不详!

亲子要闻

我发现一个带娃永远不生气的理论

家居要闻

吸睛艺术 富有传奇色彩

教育要闻

背诵很多遍依旧写不出来,要让自己根据真题练习模拟写作

军事要闻

俄在日本海演习击沉假想敌潜艇

无障碍浏览 进入关怀版