网易首页 > 网易号 > 正文 申请入驻

数据上新 | 具身智能多模态力触觉数据集:补齐物理感知短板!

0
分享至



|你有没有想过:为什么现在的机器人,能下棋、能写诗,却连一颗鸡蛋都"握"不住?

答案藏在一个被行业长期忽略的盲区里——触觉。

抓取易碎物品,挤压破损;精密装配,扭矩失控;光滑接触面打滑,预判失效……这些不是算法不够聪明,而是机器人根本没有"物理感"。

视觉让它"看得见",语言让它"听得懂",但让一台机器真正"摸得清"世界的数据,几乎是空白的。

这正是具身智能从Demo走向产业化的最大瓶颈。

景联文发布全模态具身智能数据集,用一套数据,把这块"物理感知"短板一次性补齐。



一、 行业痛点:99% 的具身数据,都"缺一根手指"

当前主流公开数据集,几乎都长一个样:RGB-D 视觉、运动轨迹、语言标注。

它们让机器人学会了"看见"和"听懂",却让机器人在物理交互面前集体失语:

•抓鸡蛋——没有力反馈数据训练,模型不知道"该用多大力"

•拧螺丝——没有扭矩时序数据,装配精度全靠运气

•擦玻璃——没有触觉滑动信号,模型无法预判"什么时候会打滑"

物理认知不完整,再强大的 VLA 模型,也只是一个仅能捕捉画面、无法读懂世界的视觉机器。

具身智能要真正走出实验室,必须先解决"摸得到、摸得准"的问题。

二、景联文:毫秒级时空对齐 × 四层递进数据链路

景联文本次发布的数据集,以毫秒级视觉–力–触觉–音频–物体状态多模态时序对齐为核心,覆盖家居、工业装配、餐饮服务、仓储搬运等上百类高频精细交互场景。

核心亮点:四层递进式数据链路

本数据集构建「原始采集 → 时空对齐 → 跨硬件迁移 → 标准化训练」四层闭环数据链路,完整覆盖从底层传感器调试、交互行为建模、多机械手适配到端到端具身大模型训练的全研发流程。

原始采集数据集:集成双手关节运动、末端位姿、3750 通道高密度触觉、多目 RGB/RGBD 视觉、环境音频文本、场景多物体交互状态等全维度原始传感信息,配套完整相机内外参、设备标定参数、高精度时序时间戳及全局样本溯源元数据。完整保留硬件原始特征,可精准支撑底层传感器性能调试与硬件感知算法迭代。

状态动作对齐数据集:严格区分机器人下发的目标控制动作与环境实时观测状态,标准化输出多模态数据。通过毫秒级时间戳校准,完成多设备、多模态数据的高精度时空对齐,构建统一、规范、时序精准的机器人交互素材库,是机器人决策、规划、力控策略等核心算法研发的基础数据底座。

灵巧手重定向数据集:基于标准化的手部运动、触觉感知、视觉场景、物体交互数据,适配不同类型机械手的 URDF 模型与硬件结构参数,有效解决异构机械手数据不兼容、跨设备数据难以复用的行业痛点,打通真机采集数据与仿真推演的数据壁垒。

LeRobot 标准训练集:基于前三层级打磨的高保真、可迁移标准化数据,深度适配 LeRobot 开源训练生态与主流具身智能算法框架,可直接用于 VLA 视觉语言动作模型、行为克隆、强化学习等前沿具身算法的训练与快速部署。

关键采集维度

采集维度

  • 关键参数
  • 机器人动作指令
  • 左右手各 17 维关节角度、7 维末端位姿
  • 机器人本体观测
  • 17 维实时关节数据、7 维末端位姿、单手 3750 通道高密度触觉压力数据

视觉感知

  • 多目 RGB/RGBD 图像,配套完整相机内外参
  • 环境音频
  • 场景音频 + 同步语音文本转写
  • 交互物体状态
  • 单物体 17 维时序状态
  • 全局元数据
  • 数据 ID、生成时间、压缩日志、关节名称、传感器排布、URDF 配置等

典型适用任务

VLA 视觉语言动作模型——补齐物理感知维度的关键训练资产

灵巧操控 & 力控算法——3750 通道触觉 + 毫秒级对齐,硬核研究首选

跨硬件迁移——URDF 重定向层直接复用,告别"换机械手就重采"

通用具身大模型预训练——标准化格式,开箱即用

行为克隆 / 强化学习——状态–动作严格分离,算法友好

景联文将继续深耕具身智能数据领域,持续为具身智能团队提供高质量、可即用、可深度定制的数据基础设施。具身智能的下一程竞争,不在模型,而在数据。

如需获取数据集详细规格与样例数据,欢迎后台留言或联系我们咨询对接。

特别声明:以上内容(如有图片或视频亦包括在内)为自媒体平台“网易号”用户上传并发布,本平台仅提供信息存储服务。

Notice: The content above (including the pictures and videos if any) is uploaded and posted by a user of NetEase Hao, which is a social media platform and only provides information storage services.

相关推荐
热点推荐
《四渡》票房一路猛涨口碑却翻车,汪海林痛批:战争片拍成过家家

《四渡》票房一路猛涨口碑却翻车,汪海林痛批:战争片拍成过家家

小徐讲八卦
2026-07-01 10:59:31
中国的给力,出乎卢卡申科意料,人还没回国,中方就给了白俄惊喜

中国的给力,出乎卢卡申科意料,人还没回国,中方就给了白俄惊喜

古史青云啊
2026-06-30 19:47:03
莫斯科又遭乌克兰无人机大规模袭击,这是俄国摇摇欲坠的危险信号

莫斯科又遭乌克兰无人机大规模袭击,这是俄国摇摇欲坠的危险信号

火星宏观
2026-07-01 09:30:01
视频爆了!凭什么欧洲人要忍受酷热,而中美民众可以自由吹空调?

视频爆了!凭什么欧洲人要忍受酷热,而中美民众可以自由吹空调?

荆楚寰宇文枢
2026-07-01 12:50:57
5人溺亡,“几乎无自救可能”

5人溺亡,“几乎无自救可能”

中国新闻周刊
2026-06-30 18:35:33
火箭队压哨3笔操作!执行2控卫合同+给1锋线报价,透露出2大信号

火箭队压哨3笔操作!执行2控卫合同+给1锋线报价,透露出2大信号

星Xin辰大海
2026-07-01 17:38:09
湖人首笔引援:签约上季场均13分格莱姆斯 基本敲定马穆+追凯斯勒

湖人首笔引援:签约上季场均13分格莱姆斯 基本敲定马穆+追凯斯勒

醉卧浮生
2026-07-01 11:18:58
2死1重伤!是什么让老实人变成杀人凶手?抚顺修车摊血案始末

2死1重伤!是什么让老实人变成杀人凶手?抚顺修车摊血案始末

易玄
2026-07-01 17:04:21
这一次,伊朗真的变天了,没有预告、没有嘴炮、没有警告。

这一次,伊朗真的变天了,没有预告、没有嘴炮、没有警告。

阿七说史
2026-06-30 15:23:31
啤酒再次被关注!医生发现:糖尿病者喝啤酒,不用多久或有5变化

啤酒再次被关注!医生发现:糖尿病者喝啤酒,不用多久或有5变化

健康之光
2026-07-01 17:14:43
这姐要凉了?

这姐要凉了?

毒舌一姐
2026-06-29 17:44:33
A股上半年收官:创业板指飙升35%,近7成个股下跌,1134只股票跌超30%

A股上半年收官:创业板指飙升35%,近7成个股下跌,1134只股票跌超30%

华夏时报
2026-06-30 19:10:13
“感觉已经闻到臭味了!”YSL新款男士水晶鞋遭吐槽,网友:脚臭可视化了

“感觉已经闻到臭味了!”YSL新款男士水晶鞋遭吐槽,网友:脚臭可视化了

大象新闻
2026-06-30 21:02:21
中原蛇蝎美女杨淑银:19岁组建杀人团伙,抢大款杀警察劫运钞车

中原蛇蝎美女杨淑银:19岁组建杀人团伙,抢大款杀警察劫运钞车

易玄
2026-07-01 06:49:06
外交部:巴拉圭政府和领导人应该顺应历史潮流和人民愿望,早日站到历史正确的一边,不要再自陷孤立

外交部:巴拉圭政府和领导人应该顺应历史潮流和人民愿望,早日站到历史正确的一边,不要再自陷孤立

环球网资讯
2026-07-01 15:33:06
“敢讹我就捅死你”,女司机把人撞成重伤,持刀冲进医院猛捅伤者

“敢讹我就捅死你”,女司机把人撞成重伤,持刀冲进医院猛捅伤者

易玄
2026-06-27 22:47:19
大量“洋垃圾”笔记本流入闲鱼!八代i5+旋转式触屏,二手450元

大量“洋垃圾”笔记本流入闲鱼!八代i5+旋转式触屏,二手450元

闲搞机
2026-07-01 11:06:09
詹皇离队彻底崩盘!马刺火箭相继挖走核心轮换,湖人丢金换铁太惨

詹皇离队彻底崩盘!马刺火箭相继挖走核心轮换,湖人丢金换铁太惨

宝哥精彩赛事
2026-07-01 16:38:27
取消中考、高中免费?国务院文件给出准信

取消中考、高中免费?国务院文件给出准信

户外阿毽
2026-07-01 02:34:45
离谱!又一死亡之组全死光了:2天3队全被淘汰 库拉索垫底未进32强

离谱!又一死亡之组全死光了:2天3队全被淘汰 库拉索垫底未进32强

风过乡
2026-07-01 12:26:01
2026-07-01 19:00:49
景联文科技
景联文科技
高质量数据生产运营商
437文章数 0关注度
往期回顾 全部

科技要闻

Claude Code被曝“植入木马”识别中国用户

头条要闻

副行长借朋友名义贷款470万 400万自用70万给朋友用

头条要闻

副行长借朋友名义贷款470万 400万自用70万给朋友用

体育要闻

卖球衣救子的门将,把德国扑出了世界杯

娱乐要闻

张凌赫:我连心疼你都隔着时差

财经要闻

新氧贷款:宣传年化15%,实际顶格24%

汽车要闻

半程收官 上汽集团销量突破200万辆

态度原创

教育
游戏
本地
房产
公开课

教育要闻

已知AB-A=58, 求A=?B=?

2026最新解读!KK对战平台官方盘点:仙剑奇侠传1完整剧情解析与遗憾弥补 (1)

本地新闻

强烈建议,全国高校都向这所大学看齐!

房产要闻

洋房盛大交付,中海丨南海·叁號院献映世界海岸的人居答案

公开课

李玫瑾:为什么性格比能力更重要?

无障碍浏览 进入关怀版