网易首页 > 网易号 > 正文 申请入驻

学术分享丨面向机器人的学习算法简述

0
分享至

以下文章来源于CAAI认知系统与信息处理专委会 ,作者马晓健

在强化学习,模仿学习及其衍生的算法之外,机器人学习还有许多其他的范式。如基于高斯过程回归和贝叶斯优化的动作规划,基于大规模优化的实时地图构建与定位,基于稀疏编码和字典学习的操作技能基元学习等。这些方法与强化学习和模仿学习虽有形式上和应用领域上的显著差异,但是作为同属于机器人学习领域的研究工作,这些算法仍然具有许多相似的特性。这些特性的存在与算法能否在机器人上得以应用息息相关。也正因为这些特性的存在,我们才将这类算法称为面向机器人的学习算法。考虑到机器人的工作场景的特点和其对技能学习的需求,面向机器人的学习算法需要具备的特性可以概括如下:

1. 在真实环境下学习

作为面向机器人的学习算法,必然面临在真实的物理环境下执行的问题。因此,完全在仿真器中完成的技能学习是不可靠的。针对这个问题的主流解决方案有两种,一是设法实现控制模型从仿真到真实环境下的迁移,二是直接在真实环境下进行学习。囿于现有模拟器对真实物理世界特性描述的不足,现有的从仿真到真实环境下的迁移的算法大都受限于所模拟器的仿真性能和精度。因而这两类算法都会不同程度的存在真实物理世界训练,或者适应性调节的步骤。在真实环境下的学习势必会带来两个直接的问题:(1)采集训练数据耗时相对较长(2)存在机械损耗。这对算法的样本利用效率和执行的安全性带来了更高的要求。

2. 鲁棒性

机器人学习算法的鲁棒性体现在两个方面。首先,机器人学习算法需要做到自身的鲁棒性。亦即在优化求解和实际执行的过程中需要保持稳定收敛的特性,不能自行发散。这是保证其能输出安全稳定的机器人控制指令的前提。另一方面,机器人学习算法需要对外界环境的噪声输入和扰动鲁棒。考虑到机器人学习算法的实际执行环境的复杂程度和非结构化程度要远高于一般的机器学习算法,因此社区也对其对输入的鲁棒性提出了更高的要求。尤其是针对对抗性的噪声和干扰输入保持稳定平滑等。

3. 可解释性

相比于其他的机器学习算法,机器人学习算法的执行器往往是工作在生产环境中的具体机器人硬件,因此对系统输出的可解释性要求较高。特别的,机器人学习算法中除了需要对操作的因果性具有解释性外,还需要针对极端情况和特殊情况下的输出具有明确的限制域。这样才能进一步保证机器人执行学习算法输出过程中的安全性。

本文由CAAI认知系统与信息处理专委会供稿

特别声明:以上内容(如有图片或视频亦包括在内)为自媒体平台“网易号”用户上传并发布,本平台仅提供信息存储服务。

Notice: The content above (including the pictures and videos if any) is uploaded and posted by a user of NetEase Hao, which is a social media platform and only provides information storage services.

相关推荐
热点推荐
真砸手里了?现役6大垃圾合同,普尔上榜,太阳有苦说不出

真砸手里了?现役6大垃圾合同,普尔上榜,太阳有苦说不出

篮球圈里的那些事
2024-03-28 18:11:59
仁川赛陈梦遭遇张本美和,30岁打16岁,给日本天才少女好好上课!

仁川赛陈梦遭遇张本美和,30岁打16岁,给日本天才少女好好上课!

林子说事
2024-03-29 12:38:32
再等3天上市,“性价比之王”新车,预计7万起,五菱都要被卷哭

再等3天上市,“性价比之王”新车,预计7万起,五菱都要被卷哭

车市风向
2024-03-28 17:16:15
国家杰青,任医科大学校长!

国家杰青,任医科大学校长!

朗威谈星座
2024-03-29 13:21:54
马云消失了,支付宝的蚂蚁森林种的树怎么办?护林员:肉眼看不见

马云消失了,支付宝的蚂蚁森林种的树怎么办?护林员:肉眼看不见

星星老师星座运势
2024-03-24 07:50:09
烧烤店老板谈淄博烧烤爆火一年后现状:顾客翻了一倍

烧烤店老板谈淄博烧烤爆火一年后现状:顾客翻了一倍

大众日报
2024-03-28 15:15:00
婚姻走向破裂的4个原因, 特别是第2种, 千万不要离

婚姻走向破裂的4个原因, 特别是第2种, 千万不要离

皮皮故事会
2024-03-29 10:47:56
古巴再起风云

古巴再起风云

爱吃鱼的哆啦A梦
2024-03-29 12:42:10
理想终于被自己发的销量榜反噬了!降价是挽回销量的唯一选择!

理想终于被自己发的销量榜反噬了!降价是挽回销量的唯一选择!

杂谈哥闲谈
2024-03-28 17:54:39
毛主席十大警卫员:1正国级、1副国级;1 大将、2上将、2 少将

毛主席十大警卫员:1正国级、1副国级;1 大将、2上将、2 少将

磊子讲史
2024-03-19 11:52:41
全款10亿庄园说买就买,网红圈里的四大“神豪”,赚钱简直太容易

全款10亿庄园说买就买,网红圈里的四大“神豪”,赚钱简直太容易

冬天会过去
2024-03-29 10:08:04
戚薇生完二胎的状态太好了,像没怀过一样,网友:有钱真好啊

戚薇生完二胎的状态太好了,像没怀过一样,网友:有钱真好啊

木子爱娱乐大号
2024-03-16 12:30:24
最低29元!小米一口气发布8款车载智能产品 含对讲机

最低29元!小米一口气发布8款车载智能产品 含对讲机

手机中国
2024-03-29 10:09:16
太炸裂:夏思凝运动裤尺度大引争议,吴艳妮也受牵连,评论区沦陷

太炸裂:夏思凝运动裤尺度大引争议,吴艳妮也受牵连,评论区沦陷

附允历史观
2024-03-29 17:19:45
银行又出新套路了,真是让人防不胜防,7个人6个都会上当

银行又出新套路了,真是让人防不胜防,7个人6个都会上当

小蜜情感说
2024-03-29 11:52:51
辽宁一女主任被执行注射死刑,短短5分钟结束了她罪恶的一生

辽宁一女主任被执行注射死刑,短短5分钟结束了她罪恶的一生

安妮Emotiong
2024-03-24 19:50:03
曝31岁泰山国脚被判3年!遭中国足球除名,出来后只能去海外踢球

曝31岁泰山国脚被判3年!遭中国足球除名,出来后只能去海外踢球

我爱英超
2024-03-28 22:38:35
硬气!旅行团37人被扣商店,一分钱东西没买,顺便教云南文旅做人

硬气!旅行团37人被扣商店,一分钱东西没买,顺便教云南文旅做人

奇思妙想草叶君
2024-03-29 01:35:05
60分+73分,东契奇还不满25岁,就创造NBA历史第一纪录

60分+73分,东契奇还不满25岁,就创造NBA历史第一纪录

大西体育
2024-02-29 09:22:44
“研究生”和“本科”的区别,六张图让人心酸不已,网友:很真实

“研究生”和“本科”的区别,六张图让人心酸不已,网友:很真实

起喜电影
2024-03-25 07:55:21
2024-03-29 18:06:44
中国人工智能学会
中国人工智能学会
中国人工智能学会网易官方账号
2548文章数 1452关注度
往期回顾 全部

科技要闻

雷军:我们是卷王,建议BBA车主感受下时代

头条要闻

奥巴马和克林顿露面支持拜登 特朗普方称要搞场更大的

头条要闻

奥巴马和克林顿露面支持拜登 特朗普方称要搞场更大的

体育要闻

拒绝为国出战,他是足坛"天选打工人"

娱乐要闻

胡夏被曝有孩子!工作室火速辟谣

财经要闻

张维迎:如何正确理解企业家精神?

汽车要闻

找回久违的开怀大笑 试驾小米SU7 Max

态度原创

健康
亲子
本地
数码
公开课

早防早筛,远离肝硬化

亲子要闻

五岁了,说话还咬舌子

本地新闻

专访|张伟潮:最年轻的龙头专职制造者

数码要闻

西部数据推出面向 NAS 应用的 24TB WD Red Pro 机械硬盘

公开课

30岁之前,你要学会的13件事情

无障碍浏览 进入关怀版