网易首页 > 网易号 > 正文 申请入驻

英伟达的机器人新魔咒:一句指令让双足机器人“自由”行动

0
分享至

近期,加州大学研究人员和英伟达在共同发表的新论文中提出“NaVILA模型”,NaVILA的核心创新在于,不需要预先的地图,机器人只需“听懂”人类的自然语言指令,结合实时的视觉图像和激光雷达信息,就可以自主导航到指定位置。

想象一下这样的场景:你早上醒来,家中的服务机器人正在等候你的指令。

你轻轻说道,“去厨房,拿瓶水过来。” 不到一分钟,机器人小心翼翼地穿过客厅,绕开沙发、宠物和玩具,稳稳地站在冰箱前,打开冰箱门,取出一瓶矿泉水,然后轻轻送到你手中。

这一幕曾经只出现在科幻电影中,而现在,得益于NaVILA模型的出现,这正在变成现实。

NaVILA不仅摆脱了对地图的依赖,还进一步将导航技术从轮式扩展到了腿式机器人,使得机器人在更多复杂场景中,具备跨越障碍和自适应路径规划的能力。

在论文中,加州大学研究人员使用宇树Go2机器狗和G1人形机器人进行了实测,根据团队统计的实测结论,在家庭、户外和工作区等真实环境中,NaVILA的导航成功率高达88%,在复杂任务中的成功率也达到了75%。

(使用NaVILA实测机器狗和机器人听指令行动)

这项研究给机器人导航范式带来革新,让机器人的路径规划从“地图依赖”走向“实时感知”。那么,NaVILA采用了什么样的技术原理?它会给机器人带来哪些新的能力?

提出“中间指令机制”,机器人可以自行拆解指令

在传统的VLN(视觉语言导航系统)中,机器人需要依靠激光雷达(LiDAR)和SLAM算法绘制和维护静态地图。无论是家用扫地机器人还是仓储中的AGV小车,这类机器人只能在预先已知的环境中运行。

一旦面临动态环境,比如家中宠物走动、仓库货架更替这类场景,静态地图的效用大幅削弱,机器人必须频繁重绘地图,而这会增加系统成本和计算负担。

但NaVILA不一样,它可以实现“无图导航”。

这主要是通过两套机制来实现的,一种是高层控制器(视觉-语言-行动(VLA)模型),一种是低层控制器。

在高层控制器层面,NaVILA通过视觉-语言-行动(VLA)模型来实现“无图导航”,即通过视觉图像、激光雷达和自然语言的多模态输入,让机器人实时感知环境中的路径、障碍物和动态目标。

这套视觉-语言-行动(VLA)模型分三个工作流:

●输入阶段:机器人会接收自然语言的指令和摄像头的图像,将人类的语言信息和摄像头看到的画面结合起来,识别出路径中的关键目标,比如前方的墙、左边的障碍物、右边的楼梯等;

●中间指令生成:生成一份“路径规划表”,VLA会生成一系列中间的高层动作指令,这些指令可能是“前进50厘米”、“向左转90度”、“迈过障碍物”等,类似于“简化的路径操作说明书”;

●高频控制器调用,它的任务是实时控制每一个关节的运动。

在这套工作流之中,NaVILA的最大亮点是提出了一种“中间指令机制”,这种机制让机器人不需要“死记硬背”每个关节的动作,而是像人类一样,听懂高层的指令后,再自行拆解为具体的行动。

“中间指令机制”可以让机器人听懂用户日常式的交流语言,不同类型的机器人能够根据自己的“身体结构”去实现动作。

通俗来说,传统的导航机器人就像一个“机械的搬运工”,每次你要告诉它“左脚先抬,右脚再抬,前进5厘米”,这种控制方式非常繁琐。

而NaVILA的VLA模型更像一名懂事的助手,你只需要说“向前走50厘米”,它就会自己拆解成“抬左腿、抬右腿、重心前移”等小动作。

(NaVILA是一个两级框架,将高级视觉语言理解与低级运动控制相结合)

高层控制器(VLA)为机器人生成了路径规划表,但“路径规划表”只能告诉机器人往哪里走,却不会告诉它怎么走。

这时就需要一个“低层控制器”来接手,控制机器人具体的关节动作。

假设你让一个小孩学习走路,如果你只告诉他“去客厅”,他会问你“怎么去?怎么迈步?先迈左脚还是右脚?” 在这个场景中,VLA就像家长的语音指令(“去客厅”),而低层控制器就是小孩自己的“肢体控制系统”,它需要根据“去客厅”的目标,控制每只脚的迈出步长、落地角度和重心平衡,以确保自己不摔倒。

特别声明:以上内容(如有图片或视频亦包括在内)为自媒体平台“网易号”用户上传并发布,本平台仅提供信息存储服务。

Notice: The content above (including the pictures and videos if any) is uploaded and posted by a user of NetEase Hao, which is a social media platform and only provides information storage services.

相关推荐
热点推荐
释某被批捕,传闻逐一坐实!

释某被批捕,传闻逐一坐实!

梳子姐
2025-11-16 18:23:57
沈阳一停车场圈占公共免费车位牟利,市民质疑:谁给你的权力?

沈阳一停车场圈占公共免费车位牟利,市民质疑:谁给你的权力?

沈阳公交网小林
2025-11-17 00:13:39
真嗑药了?40岁菲尔普斯已老态龙钟:现身悉尼 奥运23金+资产7亿

真嗑药了?40岁菲尔普斯已老态龙钟:现身悉尼 奥运23金+资产7亿

风过乡
2025-11-14 08:03:19
李在明修改尹锡悦政策,对中国表述变了,韩媒:这是间接对华示好

李在明修改尹锡悦政策,对中国表述变了,韩媒:这是间接对华示好

坠入二次元的海洋
2025-11-17 00:52:59
高市早苗涉台言论受日本舆论反对,看到中方强硬立场日本网民指责高市早苗“闯大祸”

高市早苗涉台言论受日本舆论反对,看到中方强硬立场日本网民指责高市早苗“闯大祸”

环球网资讯
2025-11-14 22:18:42
日本议员坐不住了

日本议员坐不住了

极目新闻
2025-11-16 17:20:31
全村移民加拿大,70多年没回来,广东一无人村,村民斥巨资盖别墅

全村移民加拿大,70多年没回来,广东一无人村,村民斥巨资盖别墅

boss外传
2025-11-16 13:10:03
虐待继女致死的“蛇蝎继母”被决定执行死刑!生母也应该反思

虐待继女致死的“蛇蝎继母”被决定执行死刑!生母也应该反思

细品名人
2025-11-16 07:11:09
央视镜头下,王玉雯秒了韩雨彤,短剧女主和长剧女主一眼看出区别

央视镜头下,王玉雯秒了韩雨彤,短剧女主和长剧女主一眼看出区别

情感大头说说
2025-11-17 01:33:55
人民日报专访,揭开32岁周深的真实处境,那英确实一个字都没说错

人民日报专访,揭开32岁周深的真实处境,那英确实一个字都没说错

八斗小先生
2025-11-01 08:46:54
赴日签证大变天!游客“薅羊毛”的时代或将结束...

赴日签证大变天!游客“薅羊毛”的时代或将结束...

今日日本
2025-11-13 14:05:13
谴责苏联强占北方四岛的霸权主义行径1975年10月23日《人民日报》

谴责苏联强占北方四岛的霸权主义行径1975年10月23日《人民日报》

那些看得见的老照片
2025-11-04 15:02:18
郭家一条狗引发的纠纷,愣是被身为政协委员的赵某晖作成大新闻

郭家一条狗引发的纠纷,愣是被身为政协委员的赵某晖作成大新闻

七月生活情感驿站
2025-11-16 22:50:36
美国平权政策大逆转,最高法院6:3废除种族考量,华人家庭炸锅了

美国平权政策大逆转,最高法院6:3废除种族考量,华人家庭炸锅了

壹知眠羊
2025-11-16 14:14:01
真假?大批媒体曝吴亦凡狱中绝食去世?家人也失联,知情者发声

真假?大批媒体曝吴亦凡狱中绝食去世?家人也失联,知情者发声

180视角
2025-11-12 12:05:43
戏子误国?央视公开点名,官媒狠批,这几个都是咎由自取的

戏子误国?央视公开点名,官媒狠批,这几个都是咎由自取的

阿废冷眼观察所
2025-11-17 01:44:07
日本议员叫嚣:签投降书的是中华民国,新中国没资格发表意见?

日本议员叫嚣:签投降书的是中华民国,新中国没资格发表意见?

兵国大事
2025-11-16 00:05:17
你觉不觉得她,面相变了...

你觉不觉得她,面相变了...

BenSir本色说
2025-11-16 22:07:49
陪玩陪睡不够!集体开嫖、舔手指、目无王法,阴暗面彻底藏不住了

陪玩陪睡不够!集体开嫖、舔手指、目无王法,阴暗面彻底藏不住了

好贤观史记
2025-11-09 21:58:39
喜欢一个人的眼神是藏不住的

喜欢一个人的眼神是藏不住的

贵圈真乱
2025-10-02 09:11:22
2025-11-17 02:52:49
科技常小白
科技常小白
若无某种大胆放肆的猜想
54文章数 0关注度
往期回顾 全部

科技要闻

雷军,怒了!刚刚连发多条微博

头条要闻

中国公民需谨慎前往日本 四大原因披露

头条要闻

中国公民需谨慎前往日本 四大原因披露

体育要闻

最佳新秀候选!2028美国男篮有他一个位置

娱乐要闻

CEO爆料肖战《藏海传》狂赚几十亿!

财经要闻

房源暗中调价 央企举报广州国资房企

汽车要闻

"冰彩沙"全配齐 红旗HS6 PHEV预售17.88万起

态度原创

艺术
旅游
数码
公开课
军事航空

艺术要闻

这些获奖摄影作品,简直让人目不暇接!

旅游要闻

一票游多日,一举能多得|新京报社论

数码要闻

华为鸿蒙HarmonyOS 6.0.0.112版本首曝,支持电脑投平板

公开课

李玫瑾:为什么性格比能力更重要?

军事要闻

海军四川舰顺利完成首次航行试验

无障碍浏览 进入关怀版