网易首页 > 网易号 > 正文 申请入驻

机器人智能抓取系统:目前几种主流的解决方案

0
分享至

机器人学习中的经典问题之一便是分拣:在一堆无序摆放的物品堆中,取出目标物品。在快递分拣员看来,这几乎是一个不需要思考的过程,但对于机械臂而言,这意味着复杂的矩阵计算。
事实上,对于人类需要耗费大量时间的数理难题,用智能系统处理起来就显得十分容易,但在几乎不需要思考的情况下就能做出的分选动作,则是全世界机机器人研究专家关注的热点。
机械臂抓取需要确定每段机械臂的位姿
首先,机械臂需要视觉伺服系统,来确定物体的位置,根据末端执行器(手)和视觉传感器(眼)的相对位置,可分为Eye-to-Hand和Eye-in-Hand两种系统。
Eye-to-Hand的分离式分布,视野固定不变,如果相机的标定精度高的话,那么视觉定位于抓取的精度也越高。
Eye-in-Hand则将机械臂与视觉传感器固定在一起,视野随机械臂的移动而改变,传感器越近时精度越高,但过于靠近时则可能使目标超出视野范围。
精密的视觉系统与灵活机械臂的配合,才能完成一次完美的抓取,而这正是当前机器人操作中的核心难题,归纳起来就是这么一件事:找到合适的抓取点(或吸附点),抓住它。之后的转运执行,则属于运动规划的分支。
目前几种主流的解决方案
Model-based(基于模型的方法)
这种方法很好理解,即知道要抓什么,事先采用实物扫描的方式,提前将模型的数据给到机器人系统,机器在实际抓取中就只需要进行较少的运算:
1. 离线计算:根据搭载的末端类型,对每一个物体模型计算局部抓取点;
2. 在线感知:通过RGB或点云图,计算出每个物体的三维位姿;
3. 计算抓取点:在真实世界的坐标系下,根据防碰撞等要求,选取每个物体的最佳抓取点。
RGB颜色空间由红绿蓝三种基本色组成,叠加成任意色彩,同样地,任意一种颜色也可以拆解为三种基本色的组合,机器人通过颜色坐标值来理解“颜色”。这种方式与人眼识别颜色的方向相似,在显示屏上广泛采用。
CGrasp 对精密轴承的无序抓取
Half-Model-based(半模型的方法)
在这种训练方式中,不需要完全预知抓取的物体,但是需要大量类似的物体来训练算法,让算法得以在物品堆中有效对图像进行“分割”,识别出物体的边缘。这种训练方式,需要这些流程:
1.离线训练图像分割算法,即把图片里的像素按物体区分出来,此类工作一般由专门的数据标注员来处理,按工程师的需求,标注出海量图片中的不同细节;
2.在线处理图像分割,在人工标注出的物体上,寻找合适的抓取点。
这是一种目前应用较为广泛的方式,也是机械臂抓取得以推进的主要推力。机械臂技术发展缓慢,但计算机视觉的图像分割则进展迅速,也从侧面撬动了机器人、无人驾驶等行业的发展。
Model-free(自由模型)
这种训练方式不涉及到“物体”的概念,机器直接从RGB图像或点云图上计算出合适的抓取点,基本思路就是在图像上找到Antipodal(对映点),即有可能“抓的起来”的点,逐步训练出抓取策略。这种训练方式往往让机器手大量尝试不同种类的物品,进行self-supervisedlearning,Google的Arm Farm,即为其中的代表之一。
Google Arm Farm
值得注意的是,对于机械手而言,不同形状的物品,抓取难度有天壤之别。即便是同样形状的物体,由于表面反光度和环境光照的影响,在不同场景的抓取难度也大相径庭。从实验室到商业落地,其中有相当一段路要走。
高精密度的相机研发,是机器人“感知”物体的第一步。
实际商业场景中,最麻烦的物体总是“下一个物体”。工业机器人要真正融入实际生产体系,只有具备聪明的大脑,针对不同工况做出柔性的调整,才能拓宽工业机器人的使用场景。

特别声明:以上内容(如有图片或视频亦包括在内)为自媒体平台“网易号”用户上传并发布,本平台仅提供信息存储服务。

Notice: The content above (including the pictures and videos if any) is uploaded and posted by a user of NetEase Hao, which is a social media platform and only provides information storage services.

相关推荐
热点推荐
71分钟横扫晋级!张之臻复仇轻取世界第14,首进罗马大师赛16强

71分钟横扫晋级!张之臻复仇轻取世界第14,首进罗马大师赛16强

ALL体育
2024-05-13 05:39:38
杨幂穿露奶裙被公开羞辱:她的胸碍了谁的眼?

杨幂穿露奶裙被公开羞辱:她的胸碍了谁的眼?

听风听你
2024-05-11 23:50:59
创历史?药厂距联赛赛季不败差1场,五大联赛史上仅三队达此成就

创历史?药厂距联赛赛季不败差1场,五大联赛史上仅三队达此成就

直播吧
2024-05-13 07:32:32
卧底麦当劳两家餐厅:过期食材换签“续命”,偷工减料节省成本

卧底麦当劳两家餐厅:过期食材换签“续命”,偷工减料节省成本

新京报
2024-05-13 08:08:12
速报:中国开始填岛作业,菲律宾人傻眼了

速报:中国开始填岛作业,菲律宾人傻眼了

微能量
2024-05-13 07:00:10
制胜2攻1传:约基奇35+7+7创纪录连扳两场 掘金破92.7%出局魔咒?

制胜2攻1传:约基奇35+7+7创纪录连扳两场 掘金破92.7%出局魔咒?

颜小白的篮球梦
2024-05-13 10:45:33
心寒?姆巴佩主场谢幕战遭球迷狂嘘!巴黎未办仪式,微笑挥手告别

心寒?姆巴佩主场谢幕战遭球迷狂嘘!巴黎未办仪式,微笑挥手告别

我爱英超
2024-05-13 06:35:24
南通车祸后续:优优妈妈拒绝退出班级群,追悼会现场哭诉车祸细节

南通车祸后续:优优妈妈拒绝退出班级群,追悼会现场哭诉车祸细节

古希腊掌管松饼的神
2024-05-12 19:45:41
3-1!中国女排力挫巴西获开门红,李盈莹休战,张常宁砍17分最高

3-1!中国女排力挫巴西获开门红,李盈莹休战,张常宁砍17分最高

我爱英超
2024-05-13 08:00:11
突发!10万股民踩雷,一夜回到解放前!

突发!10万股民踩雷,一夜回到解放前!

股海风云大作手
2024-05-13 07:24:12
A股:大家要提前做好心理准备,不出意外,A股很可能会重演历史?

A股:大家要提前做好心理准备,不出意外,A股很可能会重演历史?

财经大拿
2024-05-13 01:10:08
抖音账号发布新规不可再发布时政、财经等内容?知情人士:调整不涉及内容创作

抖音账号发布新规不可再发布时政、财经等内容?知情人士:调整不涉及内容创作

蓝鲸财经
2024-05-13 01:00:25
不到绝境不改革

不到绝境不改革

求实处
2024-05-12 23:33:46
南通12岁优优遗容被曝,母亲抱其遗物崩溃大哭,再次发声曝进展!

南通12岁优优遗容被曝,母亲抱其遗物崩溃大哭,再次发声曝进展!

古希腊掌管松饼的神
2024-05-13 09:11:02
孩子在护照上盖“哆啦A梦”,妈妈出入境时被拦下

孩子在护照上盖“哆啦A梦”,妈妈出入境时被拦下

人民资讯
2024-05-12 14:18:55
张静初自曝:无性无爱住豪宅,守着一屋子破烂,就想做个无用的人

张静初自曝:无性无爱住豪宅,守着一屋子破烂,就想做个无用的人

娱乐白名单
2024-05-11 15:16:35
专家怒批“接送潮”:这样会毁掉孩子!网友回怼:批评太片面!

专家怒批“接送潮”:这样会毁掉孩子!网友回怼:批评太片面!

小刀99
2024-05-12 17:16:46
谁将是苹果下一任CEO?黑马浮出水面:现年49岁,“库克非常喜欢他”

谁将是苹果下一任CEO?黑马浮出水面:现年49岁,“库克非常喜欢他”

红星新闻
2024-05-12 22:20:12
恭喜!易建联喜提新车,现场试驾,车企老总亲自陪同,引球迷围观

恭喜!易建联喜提新车,现场试驾,车企老总亲自陪同,引球迷围观

大咖唠体育
2024-05-12 16:14:24
中俄罕见同时宣布弃权,联合国15:0决定出兵,中国代表亮明立场

中俄罕见同时宣布弃权,联合国15:0决定出兵,中国代表亮明立场

绝对军评
2024-05-13 08:05:45
2024-05-13 11:40:49
快讯先锋
快讯先锋
关注最鲜活的热点播报
127文章数 61609关注度
往期回顾 全部

科技要闻

地磁暴全球刷屏!马斯克回应“星链”状态

头条要闻

针头导管断在婴儿血管5年 涉事医院借钱给家长带娃治病

头条要闻

针头导管断在婴儿血管5年 涉事医院借钱给家长带娃治病

体育要闻

不再“啃老”的辽宁队,绝处逢生

娱乐要闻

湖南卫视回应韩红请战,文案堪称一绝

财经要闻

“宁王”赚了大钱,杉杉股份没有

汽车要闻

纯电增程并行 长安马自达EZ-6实车曝光

态度原创

房产
健康
游戏
数码
军事航空

房产要闻

一二手双双回落,四月暴雨冲淡了广州楼市

春天野菜不知不识莫乱吃

《大江户仕草》免费登陆Steam 类《8番出口》解谜

数码要闻

华为WatchFIT 3本周发布 爆料称没有微信功能

军事要闻

欧盟27国就对乌克兰安全承诺草案达成共识

无障碍浏览 进入关怀版