爱吧机器人网 » 技术 > 机器人学 > 正文

UC伯克利新机器人成果:灵活自由地使用工具

核心提示:今天伯克利人工智能实验室(BAIR)这边也带来了一项新的机器人科研成果 —— 教会机器人使用工具完成任务。这篇论文的作者之一是知名青年机器学习研究员、谷歌大脑研究科学家 Chelsea Finn

AI 科技评论按:前几天我们刚刚介绍了加州大学伯克利分校 Pieter Abbeel 教授领导伯克利机器人学习实验室(UC Berkeley's Robot Learning Lab)开发的会叠衣服的家务向机器人 BLUE,今天伯克利人工智能实验室(BAIR)这边也带来了一项新的机器人科研成果 —— 教会机器人使用工具完成任务。这篇论文的作者之一是知名青年机器学习研究员、谷歌大脑研究科学家 Chelsea Finn,她目前正在 BAIR 做博士后。AI 科技评论把论文成果的介绍博客编译如下。
一个有难度的目标:学习使用工具

在许多动物身上,使用工具的能力都来自于观察学习和动手尝试两者的共同作用。比如,大猩猩可以通过观察自己已经掌握了技能的同伴学会如何用树枝从白蚁窝里“钓”白蚁吃,人类也观察到卷尾猴能够把树枝作为扫和拨的工具,把较远的食物弄到他们身边。有人也许会提出这只不过是猴子们依葫芦画瓢,但这篇论文的作者们认为使用工具的能力显然体现了更为高级的智慧。


大猩猩钓白蚁

在这项新研究中作者们探索的问题是:我们能否让机器人也拥有相似的使用工具的能力 —— 通过观察和自己动手实验学会使用工具。

在执行复杂的多物体控制任务时,有一项必须的要素是理解物理层面的因果关系,所以预测不同的物体之间会如何相互作用就非常关键。在之前的视觉深度强化学习研究(https://arxiv.org/abs/1812.00568)中,作者们已经探究了如何在机器人与世界的无监督交互过程中学习包含因果关系的视觉预测模型。在学习到这样的模型之后,机器人就可以开始规划并完成一系列简单的任务,包括叠衣服、整理物品。不过,如果考虑到使用工具的任务中更为复杂的物理交互,比如用扫帚把尘土扫进簸箕里,非指向性的动手实验就不够了。

因此,考虑到动物们是如何学习的,作者们设计了一个新的算法,它可以让机器人通过类似的模仿、互动的范式学习如何使用工具。具体来说作者们展示了,借助一组演示数据以及无监督的动手实验,机器人可以学会把新的物体作为工具使用,甚至可以在传统工具缺失的情况下灵活使用现有的工具完成任务。更进一步地,根据任务要求的不同,作者们的方法还让机器人有能力决定是否使用当前给定的工具。

作者们提出的方法让机器人有能力学习如何把不同的物体当作工具以完成用户给定的任务(第一行图中用黄色箭头标出)。任务中并没有指定机器人必须使用给定的工具,但机器人决定使用它们。

在指导中学习视觉预测

从演示中学习

首先,作者们需要使用一个演示动作数据集,其中展示了各种不同的工具是如何使用的。由于最终的目标是希望学习到一个具有多种多样的工具使用能力的模型,作者们采集的演示动作数据也就包含了多种不同的工具和多种不同的任务。对于每一个演示,作者们都让机器人自己的摄像头录制了图像序列和动作指令。

几个引导运动的例子 通过这些数据,作者们得到了一个模型,它可以提出把当前场景内存在的物体作为工具的运动序列。并且,为了能够从演示中捕捉更为丰富的行为,这个模型的输出形式是不同动作序列的分布。

为视觉预测模型的学习收集无监督数据

由于作者们希望机器人的行为不要局限于演示数据中出现的那些动作,并最终泛化到新的物体和新的情境中,他们就还需要很多不同的数据。最理想的来源当然是由机器人自己采集,而且是通过大规模可拓展的方式。比如,作者们希望机器人能够理解抓取姿态不好之类的小错误对后续的动作会有什么影响,所以他们就让机器人从现有的经验基础上继续动手实验、继续收集更多的数据。

具体来说,论文作者们设计了两种不同的数据自动采集方式:一种方式是执行随机的动作序列,另一种是从上一节中提到的动作序列提出模型中采样。后一种方式中,机器人可以把工具拿起来然后在空间中随机移动它。对于学习多物体的交互方式来说,在这一环节中学习到的经验非常重要。

根据日常物体和工具进行无监督交互学习 最终,作者们使用的数据集一共由这几部分构成:专家演示、机器人使用多种不同工具的无监督实验、以及 BAIR 机器人交互数据集中的数据。作者们用这些数据训练了一个动态模型。模型的实现方式是循环卷积神经网络,它在每个时间步骤的输入是前一副图像和一个动作,输出是一副生成的图像。

在指导中学习规划

在测试时,机器人可以使用模仿学习训练的模型来指导规划过程,然后用预测模型来觉得哪些动作可以让它完成目前的任务。

新任务的创建需要用户给定关键点的移动。比如下图中,我们希望机器人把地上的垃圾扫到簸箕中,就在图中选中垃圾的中心点,然后画出希望的最终位置。用这种方式指定任务并不会告诉机器人如何使用工具,在有多种工具可以选的环境下甚至都没有指明要用哪一种工具,机器人需要自己思考并规划。

作者们使用了一个简单的基于采样的规划过程,它会使用动作提议模型和图像预测模型的输出,并让机器人有能力用多种不同的工具和物品完成多种不同的任务。具体来说,动作序列最初是从随机采样的,然后,根据图像预测模型可以预测出每一种动作序列规划的结果。

       
同一个初始场景中,针对不同动作序列的预测结果 通过选出当前最佳的规划并根据它生成一个分布,系统可以进行反复的迭代采样,在当前最佳的规划的基础上一直优化改进,最后在机器人上执行。


系统运行框图实验

作者们对这种方法进行了实验,让它使用新的工具执行用户设定的目标。

 
从左到右: 初始场景和任务目标; 根据最佳运动规划的预测结果; 机器人的实际执行结果 在前面提到过的清扫任务中,机器人可以抓起附近的扫帚,高效地完成任务。


在另一个场景中,虽然机器人从未见过海绵,但它能够思考如何用它把盘子中的碎渣扫走。


在下面的例子中,作者们设定只允许机器人在绿色阴影范围内移动,目标是把蓝色圆柱体向自己的方向移动。显然,这个任务的关键就是机器人想到了如何使用 L 型的木块把圆柱体钩过来。


以及,即便只给机器人提供矿泉水瓶之类的日常物体,它也能推理出如何把它作为工具完成任务。


最后,在最好不使用工具的环境中,机器人也会选择直接用自己的夹钳完成任务。

左:任务目标是把两个物体都移向左边,机器人选择用工具高效地完成;右:任务目标只需移动一个物体,机器人用自己的夹钳把它移过去 除了这些例子之外,论文中的量化实验结果表明他们的方法比单独使用从演示学习有更好的泛化通用性,也比单独从经验学习有更强的完成任务能力。

关于其他机器人使用工具研究的对比讨论

论文《A Relational Approach to Tool-Use Learning in Robots》(www.roboticsproceedings.org/rss14/p44.pdf)研究了如何在任务和运动规划框架下通过逻辑编程和已知模型控制工具。然而,基于逻辑的系统和基于解析模型的系统都容易受到建模误差的影响,这会在测试执行时累积并影响表现。

其它的研究中把工具看作了面向任务的抓取动作控制(ieeexplore.ieee.org/document/769),并根据规划(cs.stanford.edu/people/asaxena/papers/deepmpc_rss2015.pdf)或者策略学习(arxiv.org/abs/1806.09266)来使用工具。这些方法都限制了涉及到工具的运用的范围,而这篇论文中的方法不论场景中有没有工具都可以完成运动规划。

也有一些别的方法(ieeexplore.ieee.org/document/1570580,cs.stanford.edu/people/asaxena/papers/deepmpc_rss2015.pdf)提出在使用工具中学习动态模型。然而,这些方法需要额外使用手工设计的感知流水线,或者完全忽略感知,这篇论文中的方法就可以直接从原始图像像素中学习物体间的交互。

结论

会出现从未见过的物体的多样、复杂任务是机器人领域正在尝试攻克的问题。为了研究这个问题,这篇论文的作者们研究了需要把物体作为工具的多种任务。作者们提出了结合模仿学习和自我监督交互学习的新方法,并展示了这种方法可以让机器人完成复杂的多物体交互任务,其中可以含有多种多样的物体,甚至可以在新的环境中灵活运用物体作为工具。作者们希望这项研究展示了让机器人同时变得更通用和更能干的新方法,以便未来机器人可以在日常生活环境中执行有用的任务。

论文原文:

《Improvisation through Physical Understanding:Using Novel Objects as Tools with Visual Foresight》

论文地址:https://arxiv.org/abs/1904.05538

via bair.berkeley.edu/blog,AI 科技评论编译


上一篇:机器人手臂Apple II 实现人工智能驱动取代“艰苦”编程
下一篇:最后一页

本周栏目热点

机器人手臂Apple II 实现人工智能驱动取代“艰苦”编程

[2019-04-13]  加州大学伯克利分校的一组研究人员开发了一种新的机器人手臂,该团队将他们的发明比作Apple II,这款个人电脑在上世纪七八十年代吸引了不少爱好者,并引发了一场技术革命。该......

UC伯克利新机器人成果:灵活自由地使用工具

[2019-04-13]  今天伯克利人工智能实验室(BAIR)这边也带来了一项新的机器人科研成果 —— 教会机器人使用工具完成任务。这篇论文的作者之一是知名青年机器学习研究员、谷歌大脑研究科学......

一文读懂机器人传感器的秘密

[2017-12-20]  机器人也是通过感知系统来感知世界,这个感知系统是通过各种各样的传感器组成的。传感器可以感受外界的信号,如光、热、烟雾、压力和湿度等等,并将信息传递给下一级装置,机......

[2018-12-10]  仿生机器鱼,不仅仅长得像鱼,还有跟鱼相似的功能,而且在集体行动时也涌现出集群现象。北京大学工学院谢广明团队,基于人工侧线系统的仿生感知技术,让仿生机器鱼能够感知周......

AGV智能机器人自动配送解决方案

[2018-01-09]  为快速响应订单需求,装配流水线实行各机型混线生产,怎样提高配送准确度和物流效率,降低制造过程在制品数成为企业决胜市场的关键。基于混线模式的AGV台套配送解决方案,通过......

精选推荐

比利时研发出可以自我愈合伤口的软体机器人
比利时研发出可以自我愈合伤口的软体机器人

[2017-09-03]  软体机器人是机器人技术的新兴领域; 他们“可以与人类相互作用,而不会杀死他们,并拿起像西红柿这样柔软的物体。” 从长远来看,布鲁塞尔大学队伍正在努力创建一个类似的材......

基于生物启发的机器人很容易适应丢失附属器官
基于生物启发的机器人很容易适应丢失附属器官

[2017-12-17]  很多机器人被设计应用在危险环境,如灾难现场。在这些地方,他们的运动系统完全有可能被损坏。那这样会吓跑这些机器人吗?也许不是,如果它们像日本的东北和北海道大学创造的......

科学家从蟑螂获得启发 教机器人更好地走路
科学家从蟑螂获得启发 教机器人更好地走路

[2017-12-11]  Weihmann指出:“我特别感到惊讶的是,动物运动稳定机制的变化与腿部协调的变化是一致的。昆虫的慢运行非常稳定,因为它的重心很低,三条腿总是以协调的方式运动。...

2018年企业数字化转型的五大趋势
2018年企业数字化转型的五大趋势

[2017-12-16]  据2016年哈佛商学院研究表明,选择进行数字化转型的企业在3年内表现出了55%的平均毛利润提升,相比之下其他企业毛利润同期降低了37%。数字化转型企业的领头羊,也曾是收入处于......

2017年:AI渗入云端
2017年:AI渗入云端

[2017-12-29]  云中的人工智能不仅仅是科技巨头的权力游戏,它也可能是人工智能领域的下一个飞跃。加利福尼亚州的Rigetti Computing公司刚刚使用其原型量子芯片之一在其云平台上运行机器学......

2023年服务机器人市场将超过250亿美元
2023年服务机器人市场将超过250亿美元

[2017-09-04]  全球服务机器人市场预计到2023年将达到250亿美元, 并在预测期内登记15% 的复合年增长率。短期中期回收期和投资回报率高 (ROI), 以及在教育和研究、临场感、防御、救援和安......

2022年全球工业机器人市场将达到790亿美元
2022年全球工业机器人市场将达到790亿美元

[2017-09-04]  预计到 2022年, 全球工业机器人市场将达到790亿美元, 并在预测期内登记11 5% 的复合年增长率。随着发展中国家中小型企业需求的不断增长, 采用自动化技术以确保生产质量......

智能机器人困惑的时候知道该问什么问题
智能机器人困惑的时候知道该问什么问题

[2017-03-20]   照片:Nick Dentamaro 布朗大学 上周,我们提到了麻省理工学院的一些研究,即通过链接人的大脑来帮助机器人在他们将要犯错误的时 ...