网易首页 > 网易号 > 正文 申请入驻

干货 | 基于Realsense技术在动态环境下的三维建图和导航避障

0
分享至

  今天为大家带来的机器人干货内容,来自去年5月23日英特尔V-SLAM技术研讨会上,机器人创新生态合作伙伴弗徕威智能机器人科技有限公司 - 潘何浩先生带来的主题演讲【基于Intel Realsense技术在动态环境下的三维建图和导航避障】,他也是弗徕威公司的算法工程师兼导航避障功能负责人,接下来的内容将会从以下四个方向进行分享。

  以下为演讲实录整理:

  首先简单介绍一下我们公司 - 弗徕威智能机器人科技有限公司,我们成立于12年8月的上海,也是我国成立较早的机器人研发机构之一,率先参与了制定服务机器人的企业标准、以及首批认证等。公司对于基础研发有较高的投入,同时也拥有自己一套完善的技术体系,我们授权的关于机器人的发明专利在国内是排名前三的。同时也是全球最早实现机器人量产,并且一次性交付量最大的集团企业之一。目前我们的总部在上海,在深圳还有一个机器人本体研发&自主移动研发中心。

  在产品方面,但我们08年还在实验室阶段的时候,就已经开始制作多种各样的机器人,只不过没有作为商品进行产业化,直到12年我们成立了公司,15年的时候开始研发自己的产品,也就是维拉机器人,维拉机器人是我们作为家庭陪伴机器人这条产业线的产品,它主要负责解决在家庭中的陪伴问题,实现健康顾问包括家庭安全等功能,同时也负责连接家里各种智能安防的传感器,或是智能家居等设备。而今天的分享也主要围绕维拉三代进行。

  在维拉三代的算法体系中,主要分为四块:

  建图模块:

  支持自主建图以及手动建图,并且支持地图标记编辑等功能。

  自主移动:

  自主移动支持随叫随到,以及导航到指定位置,包括各种操控方式例如语音控制,以及自动避障、脱困等功能。

  自动回充:

  除了可以自动标记充电座的位置,同时也支持在无地图或者无充电座位置信息的情况下通过探索方式来寻找充电座。

  自动跟随:

  较好地实现人体检测从而进行人体跟随,保证它可以跟得及时不跟错误,跟丢了也可以随时跟回来。

  我们使用英特尔Realsense深度相机为机器人提供建图和导航支持,它也是一个必不可少的组件,因为立体视觉信息对其建图模型的完整性和准确性是必不可少的。

  而在导航过程中,具体的家居环境像椅子箱子之类的东西事实上是非常多的,像一张桌子,我们本质上是不希望机器人钻到桌子底下的,所以在自主建图的过程中就需要把桌椅的位置标记出来的,如果仅依赖平面导航,机器人的运动性能会有受到很大的限制。我们希望它能在无人为干预的情况下,能够尽可能的做好,能实现自主顺利地在复杂环境中移动的能力。

  上面是一个对比图,分别是【仅采用激光雷达】以及采用【深度相机+激光雷达】去测试同一个场景,在建图过程中,可以看到仅使用激光雷达的案例,它是完全没有办法看到桌椅的,所以在这个模型下仿佛是一片空旷的区域,而另一边依靠深度信息可以分辨出立体的椅子和桌子,然后就可以在地图上作出准确的标记。

  除了在建图中有这种情况外,还有针对移动人体的场景。在实际的建图环节中,人很容易走进机器人的测量范围内,在没有深度相机的技术支持下,仅依靠雷达很容易会把人体检测为建筑共同体当成障碍物的一部分,而影响后续的建图和擦除,甚至还可能会让机器人反复测量这个位置,才能把这个区域的真实情况记录进地图中。

  但当我们加入了深度信息之后,它能够完成识别人体的工作,较好地完成建图工作。

  接下来的内容,是关于如何利用Realsense深度相机实现机器人的导航避障功能。首先导航问题就和上面的建图问题一样,激光雷达在导航过程中有视觉盲区的问题。

  在上面这个案例中,机器人在没有深度信息的情况下,遇到障碍物,只能通过碰撞去发现新的障碍点,很明显我们是希望避免这种情况,更多的情况是机器人有可能陷入到和障碍物进入到一种胶着的状态。所以我们为了弥补这种状态,我们利用Realsense来实现机器人更好的探索功能。

  当然深度相机也有它自身的限制,例如FOV视场角的限制,而其中最棘手的一点是,在家中到处移动的机器人,存在一个移动障碍物检测的问题,举个例子,当机器人遇到桌子,会收录这个三维信息,把它标记为障碍物,但如果遇到了移动中的人体,由于人同时也处于运动状态,当机器人在持续不断地检测人体的三维信息,会让每一段的三维信息连起来,成为一道“残影墙”,这对机器人实现导航功能来说非常致命。

  针对这个问题,我们特意设计了一个场景,在机器人导航过程中,尤其是通过比较狭窄的走廊时,让一个人从它面前穿过去,穿过去之后在图中会有一片非常大的立体数据,机器人就会想办法绕路绕过去,直至到无路可走,这是我们想极力避免的。

  针对这一点,我们结合人体检测模块,通过深度相机提供的三维数据可以精准定位和区分正在移动中人体,并且将这部分从地图中扣除,把导航过程中的影响也给抹除掉。同时还不影响对静态障碍物的处理,通过这样的处理设计,机器人就够非常高效且智能地处理导航中遇到的突发问题。

  以上两部分的分享主要是围绕我们为什么要选择深度视觉相机以及如何利用这部分的信息,即便在没有人为干预的情况下,去实现更出色的建图和导航功能。以上是我的全部分享,感谢!

特别声明:以上内容(如有图片或视频亦包括在内)为自媒体平台“网易号”用户上传并发布,本平台仅提供信息存储服务。

Notice: The content above (including the pictures and videos if any) is uploaded and posted by a user of NetEase Hao, which is a social media platform and only provides information storage services.

相关推荐
热点推荐
发现阿里老公失业了,他每天假装上班。我要不要告诉他已经知道了

发现阿里老公失业了,他每天假装上班。我要不要告诉他已经知道了

蚂蚁大喇叭
2026-07-03 11:29:16
尹乃菁与郑丽文切割,郑借势换血清杂音,启用陈以信全面收拢权力

尹乃菁与郑丽文切割,郑借势换血清杂音,启用陈以信全面收拢权力

除此深远轮廓
2026-07-03 08:25:16
她是大家熟悉的演员,不拍戏在法国洗碗谋生,如今遭遇高温热得慌

她是大家熟悉的演员,不拍戏在法国洗碗谋生,如今遭遇高温热得慌

潋滟晴方DAY
2026-07-01 23:20:19
日本振振有词让中方给个解释,凭什么连自卫队都不放过?

日本振振有词让中方给个解释,凭什么连自卫队都不放过?

铁锤侃侃而谈
2026-07-03 12:22:25
神操作!男子将现任妻子照片PS成前妻样貌,假冒有前妻授权,欲独吞60万执行返还款,被法院当场识破

神操作!男子将现任妻子照片PS成前妻样貌,假冒有前妻授权,欲独吞60万执行返还款,被法院当场识破

上观新闻
2026-07-03 09:35:12
毛主席接见导弹营长岳振华,说:你打下一架飞机,我就给你加颗豆

毛主席接见导弹营长岳振华,说:你打下一架飞机,我就给你加颗豆

搜史君
2026-06-30 13:45:10
会长权顺基,任上被查

会长权顺基,任上被查

扬子晚报
2026-07-03 12:42:12
就这还日乒最强+世界冠军?削球对决0-3完败 桥本内战已四连败

就这还日乒最强+世界冠军?削球对决0-3完败 桥本内战已四连败

颜小白的篮球梦
2026-07-03 06:09:50
自然界从没出现过丝袜,为啥男生天生会对丝袜如此着迷?

自然界从没出现过丝袜,为啥男生天生会对丝袜如此着迷?

向航说
2026-07-03 11:55:05
印媒高调宣称,印度空调制造商将帮欧洲降温,抢夺中国厂商的订单

印媒高调宣称,印度空调制造商将帮欧洲降温,抢夺中国厂商的订单

王新喜
2026-07-02 15:08:27
上午开国,下午谋反

上午开国,下午谋反

我是历史其实挺有趣
2026-07-02 14:22:50
地铁吐血女孩10天收7张病危通知单,被医生委婉劝说保守治疗,当事人:6月经历了很多挫折,面对死亡“有一点点害怕”

地铁吐血女孩10天收7张病危通知单,被医生委婉劝说保守治疗,当事人:6月经历了很多挫折,面对死亡“有一点点害怕”

极目新闻
2026-07-02 22:36:35
医生提醒:若长期一天只吃两顿饭,用不了半年,或患上这4种疾病

医生提醒:若长期一天只吃两顿饭,用不了半年,或患上这4种疾病

路医生健康科普
2026-06-29 12:05:03
“再降薪就没人踢了”,徐亮暴怒发声的原因出来了,范志毅说对了

“再降薪就没人踢了”,徐亮暴怒发声的原因出来了,范志毅说对了

娱说瑜悦
2026-06-17 13:53:07
曾是上海著名滑稽演员,妻子是我们熟悉的她,如今70岁靠商演谋生

曾是上海著名滑稽演员,妻子是我们熟悉的她,如今70岁靠商演谋生

胡一舸南游y
2026-07-02 14:58:35
人根本不用养老!看懂这个真相,余生少走十年弯路

人根本不用养老!看懂这个真相,余生少走十年弯路

椰青美食分享
2026-07-02 11:40:36
大陆7.1提出两岸统一,国民党回应致民进党坐不住了

大陆7.1提出两岸统一,国民党回应致民进党坐不住了

余塩搞笑段子
2026-07-01 19:07:31
中国已经成为全球第一个集体拒接电话的国家

中国已经成为全球第一个集体拒接电话的国家

黯泉
2026-06-26 10:44:35
8600 万!阿森纳锁定 21 岁世界杯天才,被誉为未来金球奖得主

8600 万!阿森纳锁定 21 岁世界杯天才,被誉为未来金球奖得主

澜归序
2026-07-03 04:57:17
中足联官宣重磅罚单!52岁于根伟禁赛5场罚5万 辱骂+率队围堵裁判

中足联官宣重磅罚单!52岁于根伟禁赛5场罚5万 辱骂+率队围堵裁判

我爱英超
2026-07-02 22:05:30
2026-07-03 13:40:49
机器人创新生态
机器人创新生态
机器人领域权威自媒体
1021文章数 61关注度
往期回顾 全部

科技要闻

特斯拉交付超预期7.4万辆,股价却大跌7.5%

头条要闻

齐达内儿子被梅西打穿后一度崩溃 淘汰赛又被灌进2球

头条要闻

齐达内儿子被梅西打穿后一度崩溃 淘汰赛又被灌进2球

体育要闻

韩国人,为什么恨透了洪明甫?

娱乐要闻

黄晓明深夜约会美女,分手原因曝光

财经要闻

AI“鬼故事”不断,市场开始重估?

汽车要闻

极氪9X五座版官宣,如图!

态度原创

健康
本地
数码
公开课
军事航空

这4类消化病患者 吃粘食管住嘴

本地新闻

这场穿越酉阳的光影之旅,张张都是壁纸!

数码要闻

299元双8K旗舰款!雷神X7s Pro Max鼠标预售:全球首发PAW3955 Turbo

公开课

李玫瑾:为什么性格比能力更重要?

军事要闻

美军“航母杀手”首次公开 此前从未展示

无障碍浏览 进入关怀版