创泽机器人
CHUANGZE ROBOT
当前位置:首页 > 新闻资讯 > 机器人应用 > 机器人示教学习:高级技能学习方法(学习计划和学习目标)

机器人示教学习:高级技能学习方法(学习计划和学习目标)

来源:CAAI认知系统与信息处理专委会     编辑:创泽   时间:2020/6/9   主题:其他 [加盟]
机器人可以在人类教师反馈的基础上来探索某项任务。反馈提供了关于机器人尝试的任务满足目标的程度的信息。大多数基于反馈的工作倾向于采用强化学习。传统的RL算法提供了一个反馈(奖励)信号,在这种情况下使用了人工响应。在某些情况下,除了人类的反馈,任务的表现直接受到老师的影响,老师允许选择下一步行动。在[10]中,这种方法将任务学习表现提高了约50%。

需要注意的是,有时选择的示教方法和获取的数据类型与学习算法的选择有关。一方面来自多个模态的示范增加了维数,增加了学习的复杂性。数据的维数可以降低,但是有些信息被忽略,导致从示教数据中学习不当。另一方面,缺少传感模态可能会在一开始就提供不完整的信息,导致学习算法表现不理想。

高级技能可以认为是一组低级技能或一组动作基元。除此之外,高级技能还包括对象可视性,涉及构建物理世界对象和机器人动作之间关系的知识。高级技能学习方法可以大致分为学习计划和学习目标。

1)学习计划:在这种高级技能的学习方法中,学习计划为从初始状态到最终状态的一系列动作。因此,动作是根据前置条件和后置条件定义的。前置条件为动作执行前的状态,后置条件为动作执行后的状态。除此之外,人类教师还用注释的形式提供附加信息。注释可以通过触觉、视觉或语义来提供。额外的信息允许更好地概括高水平的技能。可执行的动作可以是简单的低级技能,如抓住目标对象,拾起绿色的对象等,组合起来形成一个高级任务,如排序绿色的对象。另一方面,有一些方法可以通过在示教数据中寻找重复的结构来从高级技能示教中提取低级技能,这样就可以在不同的示教中识别它。在[2]中,一个示教学习范例是通过人类示教和在程序界面输入的用户目的来描述的。在[18]中,一些涉及一系列顺序旋转和转换的日常对象操作的示教被用来提取顺序的低级技能,并进一步构建一个计划。这项工作还示教了从一个对象到其他类似对象的学习知识转移。


2)学习目标:推断高级技能的目标。人类教师提供的示教被用来推断执行高级技能的意图。通过生成假设,可以从重复的示教中推断出目标。现代方法也使用基于奖励函数的强化学习方法来实现期望目标。如果奖励函数是从给定的示教中学习的,那么它就被认为是目标学习。一些基于强化学习的方法得到了很好的研究[19]。


3、讨论总结

技能的学习直接依赖于示教的准确性。大多数方法[20]手动消除了部分示教中的噪声。结合强化学习,在奖励和探索机制的基础上对技能学习进行改进。另一种改进技能的方法涉及示教者反馈[21]。当机器人在一个稍微不熟悉的情况下执行学习到的技能时,从人类教师那里得到关于执行技能可取性的反馈。目前为了实现这种技能细化的方法,研究人员主要从两个方面进行了研究:(1)控制机器人和人类教师之间的信息交互,(2)提供反馈。





苏州行政审批局实现导引机器人导览服务

苏州行政审批局实现机器人导览服务。5G 高速互联网接入服务。异地超高清视频通话

农业机器人视觉识别杂草技术

由于机器视觉可以提供目标物的颜色、形状、纹理、深度等丰富的信息,且精度相当高,成本相对较低,因此以往关于植物检测的研究大多基于机器视觉

武汉大学研发可精准控制迷你软体机器人

武汉大学薛龙建教授团队研制出一种迷你软体机器人Geca-Robot,其可精准控制方向和速度,可在废墟狭缝、生物体内完成各种复杂作业

方滨兴院士:人工智能安全之我见

人工智能技术在安全领域的应用需求日益迫切,人工智能自身的安全问题也不容小觑,安全与人工智能并举,双方的融合发展与创新是我强国战略中不可忽视的重要助推因素

浅谈机器人的灵巧手

专注于极简主义设计方法。在保留拟人化设计的许多优点的同时,在设计和控制方面进行原则性的简化,可以合理地降低系统的复杂度,包括执行器、传感器和程序代码的数量

辅助机器人对机器人灵巧手的应用要求

辅助机器人必须能够在日常生活活动中与环境和人类安全地互动和合作,这意味着手需要小、轻、灵活

猎户星空:医疗服务机器人

医疗服务机器人根据医院需求分别执行递送化验单、药物等工作,用机器人代替医护过程中简单但耗力的流程化工作

极飞科技:无人机抗疫解决方案

在巨大的公共卫生危机面前,无人机能够进入疫情严重区域自动喷洒消毒剂,降低应急人员被病毒感染的风险

水下机器人灵巧操作的新型触觉感知

泵和传感器可以安装在靠近手臂的机器人底座上进行保护,并实现与机械手远程连接

国内安防AI芯片型号,类型,处理速度和功能一览表

Hi3559AV100 Hi3519AV100 Hi3516DV300 Hi3516CV500 昇腾310 旭日 听涛 思元220 BM1682 BM1880 DeepEye1000 T01

机器人守护人类生命线,六大趋势凸显前景无限

机器人也都成为应急救援抢险的标配,救援机器人发展空间和潜力的爆发,既得益于需求的释放,也离不开技术突破与商用价值的支撑

追一科技:智能营销机器人应用案例

智能营销机器人能够基于营销、催收等不同场景配置外呼对话流程,细分场景、描绘精准客户画像并对应采取不同话术,成为该银行智能化转型的合作厂商。
资料获取
机器人应用
== 最新资讯 ==
ChatGPT:又一个“人形机器人”主题
ChatGPT快速流行,重构 AI 商业
中国机器视觉产业方面的政策
中国机器视觉产业聚焦于中国东部沿海地区(
从CHAT-GPT到生成式AI:人工智能
工信部等十七部门印发《机器人+应用行动实
全球人工智能企业市值/估值 TOP20
创泽智能机器人集团股份有限公司第十一期上
谐波减速器和RV减速器比较
机器人减速器:谐波减速器和RV减速器
人形机器人技术难点 高精尖技术的综合
机器人大规模商用面临的痛点有四个方面
青岛市机器人产业概况:机器人企业多布局在
六大机器人产业集群的特点
机械臂-高度非线性强耦合的复杂系统
== 机器人推荐 ==
迎宾讲解服务机器人

服务机器人(迎宾、讲解、导诊...)

智能消毒机器人

智能消毒机器人

机器人开发平台

机器人开发平台


机器人招商 Disinfection Robot 机器人公司 机器人应用 智能医疗 物联网 机器人排名 机器人企业 机器人政策 教育机器人 迎宾机器人 机器人开发 独角兽 消毒机器人品牌 消毒机器人 合理用药 地图
版权所有 创泽智能机器人集团股份有限公司 中国运营中心:北京 清华科技园九号楼5层 中国生产中心:山东日照太原路71号
销售1:4006-935-088 销售2:4006-937-088 客服电话: 4008-128-728