网易首页 > 网易号 > 正文 申请入驻

机器人智能抓取系统:目前几种主流的解决方案

0
分享至

机器人学习中的经典问题之一便是分拣:在一堆无序摆放的物品堆中,取出目标物品。在快递分拣员看来,这几乎是一个不需要思考的过程,但对于机械臂而言,这意味着复杂的矩阵计算。
事实上,对于人类需要耗费大量时间的数理难题,用智能系统处理起来就显得十分容易,但在几乎不需要思考的情况下就能做出的分选动作,则是全世界机机器人研究专家关注的热点。
机械臂抓取需要确定每段机械臂的位姿
首先,机械臂需要视觉伺服系统,来确定物体的位置,根据末端执行器(手)和视觉传感器(眼)的相对位置,可分为Eye-to-Hand和Eye-in-Hand两种系统。
Eye-to-Hand的分离式分布,视野固定不变,如果相机的标定精度高的话,那么视觉定位于抓取的精度也越高。
Eye-in-Hand则将机械臂与视觉传感器固定在一起,视野随机械臂的移动而改变,传感器越近时精度越高,但过于靠近时则可能使目标超出视野范围。
精密的视觉系统与灵活机械臂的配合,才能完成一次完美的抓取,而这正是当前机器人操作中的核心难题,归纳起来就是这么一件事:找到合适的抓取点(或吸附点),抓住它。之后的转运执行,则属于运动规划的分支。
目前几种主流的解决方案
Model-based(基于模型的方法)
这种方法很好理解,即知道要抓什么,事先采用实物扫描的方式,提前将模型的数据给到机器人系统,机器在实际抓取中就只需要进行较少的运算:
1. 离线计算:根据搭载的末端类型,对每一个物体模型计算局部抓取点;
2. 在线感知:通过RGB或点云图,计算出每个物体的三维位姿;
3. 计算抓取点:在真实世界的坐标系下,根据防碰撞等要求,选取每个物体的最佳抓取点。
RGB颜色空间由红绿蓝三种基本色组成,叠加成任意色彩,同样地,任意一种颜色也可以拆解为三种基本色的组合,机器人通过颜色坐标值来理解“颜色”。这种方式与人眼识别颜色的方向相似,在显示屏上广泛采用。
CGrasp 对精密轴承的无序抓取
Half-Model-based(半模型的方法)
在这种训练方式中,不需要完全预知抓取的物体,但是需要大量类似的物体来训练算法,让算法得以在物品堆中有效对图像进行“分割”,识别出物体的边缘。这种训练方式,需要这些流程:
1.离线训练图像分割算法,即把图片里的像素按物体区分出来,此类工作一般由专门的数据标注员来处理,按工程师的需求,标注出海量图片中的不同细节;
2.在线处理图像分割,在人工标注出的物体上,寻找合适的抓取点。
这是一种目前应用较为广泛的方式,也是机械臂抓取得以推进的主要推力。机械臂技术发展缓慢,但计算机视觉的图像分割则进展迅速,也从侧面撬动了机器人、无人驾驶等行业的发展。
Model-free(自由模型)
这种训练方式不涉及到“物体”的概念,机器直接从RGB图像或点云图上计算出合适的抓取点,基本思路就是在图像上找到Antipodal(对映点),即有可能“抓的起来”的点,逐步训练出抓取策略。这种训练方式往往让机器手大量尝试不同种类的物品,进行self-supervisedlearning,Google的Arm Farm,即为其中的代表之一。
Google Arm Farm
值得注意的是,对于机械手而言,不同形状的物品,抓取难度有天壤之别。即便是同样形状的物体,由于表面反光度和环境光照的影响,在不同场景的抓取难度也大相径庭。从实验室到商业落地,其中有相当一段路要走。
高精密度的相机研发,是机器人“感知”物体的第一步。
实际商业场景中,最麻烦的物体总是“下一个物体”。工业机器人要真正融入实际生产体系,只有具备聪明的大脑,针对不同工况做出柔性的调整,才能拓宽工业机器人的使用场景。

特别声明:以上内容(如有图片或视频亦包括在内)为自媒体平台“网易号”用户上传并发布,本平台仅提供信息存储服务。

Notice: The content above (including the pictures and videos if any) is uploaded and posted by a user of NetEase Hao, which is a social media platform and only provides information storage services.

相关推荐
热点推荐
李嘉诚:内地刚推最强救市政策就降价1/3卖房,判断房价从未失误

李嘉诚:内地刚推最强救市政策就降价1/3卖房,判断房价从未失误

大风文字
2024-05-21 06:28:30
再见马琳?李隼做意外决定,改变刘国梁想法,国乒新掌门浮出水面

再见马琳?李隼做意外决定,改变刘国梁想法,国乒新掌门浮出水面

忠橙家族
2024-05-23 00:50:03
法网男单签表出炉:纳达尔首轮战兹维列夫,穆雷瓦林卡狭路相逢

法网男单签表出炉:纳达尔首轮战兹维列夫,穆雷瓦林卡狭路相逢

ALL体育
2024-05-23 21:03:08
华春莹称将落实《开罗宣言》,日本主权仅限四岛,中方已做好准备

华春莹称将落实《开罗宣言》,日本主权仅限四岛,中方已做好准备

圈里的甜橙子
2024-05-23 22:53:24
教育部公布:史上最大规模专业调整!

教育部公布:史上最大规模专业调整!

21世纪经济报道
2024-03-21 15:44:15
大S汪小菲双双发声,回应儿子被退学,打脸张兰太尴尬!

大S汪小菲双双发声,回应儿子被退学,打脸张兰太尴尬!

古希腊掌管月桂的神
2024-05-23 13:48:29
亲美辱华,背刺祖国,吃中国饭却长美国心的吕丽萍,现在自食恶果

亲美辱华,背刺祖国,吃中国饭却长美国心的吕丽萍,现在自食恶果

番茄说史聊
2024-05-16 17:41:40
热巴私服大解放!穿裸背裙乘高铁引热议,车上看书却被质疑立人设

热巴私服大解放!穿裸背裙乘高铁引热议,车上看书却被质疑立人设

萌神木木
2023-07-22 17:18:18
东部战区宣布开展联合演训!岛内高度关注:“围岛军演比想象中更快出现”

东部战区宣布开展联合演训!岛内高度关注:“围岛军演比想象中更快出现”

环球网资讯
2024-05-23 11:59:54
美乌为何感到绝望?传说俄罗斯从我国大量购买:二手电渣重熔设备

美乌为何感到绝望?传说俄罗斯从我国大量购买:二手电渣重熔设备

帅先工场
2024-05-23 17:11:37
扫地出门!曼联“头号水货”将被出售!追逐天才前腰吃“闭门羹”

扫地出门!曼联“头号水货”将被出售!追逐天才前腰吃“闭门羹”

头狼追球
2024-05-23 16:31:04
莱希遇难不到24小时,伊朗当面向中国做出三点承诺,中东不会变天

莱希遇难不到24小时,伊朗当面向中国做出三点承诺,中东不会变天

张贺在埃及
2024-05-23 10:48:19
44岁男子每月5万包养18岁女生,发生关系后,女生数钱发现是冥币

44岁男子每月5万包养18岁女生,发生关系后,女生数钱发现是冥币

小胡子谈汇
2024-05-23 18:38:41
张韶涵转发表态!周杰伦立场再被质疑,发文表示勿扰引争议

张韶涵转发表态!周杰伦立场再被质疑,发文表示勿扰引争议

萌神木木
2024-05-23 16:36:39
一百多国联名逼迫中国,只为销毁中国一项武器,我国当场霸气拒绝

一百多国联名逼迫中国,只为销毁中国一项武器,我国当场霸气拒绝

百年历史老号
2024-05-23 10:39:39
打脸!爱德华兹赛前放豪言,欧文30分关键罚球,NBA各界嘲讽

打脸!爱德华兹赛前放豪言,欧文30分关键罚球,NBA各界嘲讽

天涯沦落人
2024-05-23 11:03:21
日本饮料巨头:年赚中国65亿,用汉字伪装,被误认成是中国品牌

日本饮料巨头:年赚中国65亿,用汉字伪装,被误认成是中国品牌

贾文彬的史书
2024-05-21 17:52:51
做好准备,中国即将“喜迎”通胀

做好准备,中国即将“喜迎”通胀

云石
2024-05-23 09:34:04
把船拖走!中方下达最后通牒!西部战区司令被撤职,菲律宾慌了

把船拖走!中方下达最后通牒!西部战区司令被撤职,菲律宾慌了

吃鱼思故渊
2024-05-22 21:57:29
王红权星被封后首露面,穿1.4w卫衣变化大,友人公开其财富来源!

王红权星被封后首露面,穿1.4w卫衣变化大,友人公开其财富来源!

古希腊掌管月桂的神
2024-05-23 17:48:39
2024-05-24 03:44:49
快讯先锋
快讯先锋
关注最鲜活的热点播报
127文章数 61609关注度
往期回顾 全部

科技要闻

黄仁勋业绩会万字实录:我们的压力太大了

头条要闻

奥迪车主称每次启动车辆就会显示"续费弹窗" 客服回应

头条要闻

奥迪车主称每次启动车辆就会显示"续费弹窗" 客服回应

体育要闻

欧文,三十二而立

娱乐要闻

大S儿子被学校退学,张兰称孙子没人管

财经要闻

九鼎金租减值罗生门:郑州银行藏雷?

汽车要闻

上汽大通大家7超混/大家9超混将于6月7日正式上市

态度原创

健康
手机
亲子
公开课
军事航空

在中国,到底哪些人在吃“伟哥”?

手机要闻

vivo S19系列再次被确认:三款版本,能打过OPPO Reno12系列吗?

亲子要闻

爸爸记录儿子如何帮他搓澡,本来想记录温情画面,结果后面逐渐离谱

公开课

近视只是视力差?小心并发症

军事要闻

以军继续杰宁攻势 巴武装组织打击以目标

无障碍浏览 进入关怀版