爱吧机器人网 » 技术 > 机器人学 > 正文

谷歌机器人自己学会走路,完全无需人工干预

小鹿在出生后十分钟内就能站起来,七个小时内就能学会走路。在能够站起来但还不会走路的这段时间里,它会非常可爱、非常狂热地摆动它的四肢。

这就是人工智能机器人背后的理念。虽然自主机器人和自动驾驶汽车一样,已经是一个被大众所熟知的概念,但自主学习机器人仍然只是一个设想。现有的强化学习算法虽然能够让机器人通过反复试验来学习动作,但仍严重依赖于人工干预。每当机器人跌倒或走出训练环境时,它还是需要有人扶起它,并将它放回正确的位置。

最近,谷歌研究人员的一项新研究取得了重大进展,机器人可以在没有人工干预的情况下学习走路。在几个小时内,仅仅依靠对当前最先进算法的微调,它们成功地让一个四条腿的机器人学会了完全独立的向前走和向后走,以及左右转弯。

图 | 机器人在不同的地形上学习自主行走,包括平地(上)、记忆泡沫床垫(中)和镂空的门垫(下) (来源:arxiv.org)

这项工作建立在一年前的研究基础上,当时研究团队首次发现了如何让机器人在现实世界中学习。

此前,强化学习通常在模拟环境中进行:机器人的虚拟分身在模拟的环境中走来走去,直到算法足够完善,可以使其安全运行为止。然后将其导入真正的机器人。

这种方法有助于避免机器人在反复实验过程中对周围环境的损伤,但也需要一个易于建模的环境。在机器人脚下模拟自然散落的沙砾或者弹簧床垫需要很长时间,根本不值得。

基于这种状况,研究人员从一开始就决定通过在真实世界中训练来避免困难的环境建模。他们设计了一种更高效的算法,可以使学习的试验次数变少一点,并在两个小时内让机器人站起来行走。由于实际环境中会有自然变化,机器人也能够快速适应其他相似的环境,如斜坡、台阶以及有障碍的平地。

但是,这个过程仍然需要人类去帮助机器人,并手动干预上百次,Google Brain 机器人运动团队的负责人、论文合著者谭杰(音译)说,“一开始我没想过还需要人工干预。”

于是他们开始解决这个新问题。首先,他们限定了机器人可以探索的地形,并让它一次性进行多重动作训练。如果机器人在学习如何向前走的同时到达了限定地形的边缘,它就会改变方向,开始学习如何向后走。

其次,研究人员还限制了机器人的训练动作,让它能够谨慎一些,最大限度地减少反复摔倒带来的伤害。当机器人不可避免地摔倒时,他们还添加了另一个硬编码算法来帮助它站起来。

通过这些调整,机器人学会了如何在几个不同的环境中自主行走,包括平地、记忆泡沫床垫和有缝隙的门垫。这项实验给未来的某些应用带来了可能性,有些情况可能需要机器人在没有人类的情况下在坎坷和未知的地形中行走。

斯坦福大学助理教授切尔西 • 芬恩(Chelsea Finn)表示:“这项工作令人感到非常兴奋。” 芬恩也为谷歌工作,但没有参与这项研究。“让这个过程不再出现人工干预真的很难。机器人能够更自主地学习,就更有可能在我们生活的现实世界中学习,而不是在实验室里。”

但她也提醒到,目前的设置依赖于机器人上方的动作捕捉系统来确定其位置。这在现实世界中是不可能的。

接下来,研究人员希望他们的算法能适用于不同种类的机器人,或适用于多个机器人在同一环境中同时进行学习。谭杰相信,破解机器人的运动能力将是解锁更多有用机器人的关键。

“很多地方都是为人类建造的,我们都用腿来走路,” 他说,“如果机器人学不会使用腿,它们就不能在人类世界中行走。”

编译:潘瑾


上一篇:麻省理工学院最新研究:优化软体机器人的控制和设计
下一篇:BADGR机器人使用深度学习来规划和穿越无障碍路径
精选推荐
MIT研制出可以像植物一样生长的机器人
MIT研制出可以像植物一样生长的机器人

[2019-11-09]  麻省理工学院开发了一种新型机器人,这种机器人可以本质上自我延伸,其生长方式与植物幼苗向上生长的方式惊人相似。值得注意的是,研究人员 ...

全自动膝关节置换手术机器人被美国FDA批准上市
全自动膝关节置换手术机器人被美国FDA批准上市

[2019-10-14]  美国Think Surgical公司已获得美国食品和药物管理局(FDA)的批准,在美国销售用于全膝关节置换(TKA)的TSolution One®全膝关节应用 ...

苹果AI主管透露自动驾驶汽车项目关于机器学习方面的进展
苹果AI主管透露自动驾驶汽车项目关于机器学习方面的进展

[2017-12-11]  苹果隐秘的自动驾驶汽车项目多年来一直在转移焦点,但今年似乎正在加速。 4月份,公司获得了在加利福尼亚州进行自动驾驶汽车测试的许可证,而在6月份,苹果公司首席执行官库......

比利时研发出可以自我愈合伤口的软体机器人
比利时研发出可以自我愈合伤口的软体机器人

[2017-09-03]  软体机器人是机器人技术的新兴领域; 他们“可以与人类相互作用,而不会杀死他们,并拿起像西红柿这样柔软的物体。” 从长远来看,布鲁塞尔大学队伍正在努力创建一个类似的材......

国外眼科手术机器人为视网膜静脉阻塞患者带来希望
国外眼科手术机器人为视网膜静脉阻塞患者带来希望

[2017-03-20]  视网膜静脉阻塞,简称RVO,对患者来说是一种严重的疾病。该病病因为视网膜静脉中存在血液凝块,这可能导致视力严重下降,在某些情况下,病 ...

MIT用深度学习处理3D点云数据 应用于无人汽车等领域
MIT用深度学习处理3D点云数据 应用于无人汽车等领域

[2019-10-23]  如果你见过自动驾驶汽车,也许会对车顶上那个一直在旋转的圆柱体感到好奇。这是一个雷达传感器,无人驾驶汽车依靠它在现实世界中进行导航。 ...

通过对抗性图像黑入大脑
通过对抗性图像黑入大脑

[2018-03-02]  在上面的图片中,左边是一张猫的照片。在右边,你能分辨出它是同一只猫的图片,还是一张看起来相似的狗的图片?这两张图片之间的区别在于, ...

什么是机器人学?机器人学简介
什么是机器人学?机器人学简介

[2017-12-14]  机器人学是工程学与科学的交叉学科,包括机械工程,电气工程,计算机科学等。机器人技术涉及机器人的设计、制造、操作和应用,以及用于控制、感官反馈和信息处理的计算机系统。...

本周栏目热点

机器人离线编程误差来源分析及消除办法

[2018-01-02]  随着机器人应用领域越来越广,传统的示教编程这种编程手段有些场合变得效率非常低下,于是离线编程应运而生,并且应用越来越普及。初用离线编程的朋友,总会被最后生...

全面了解机器人的精度

[2018-05-07]  1 绝对精度是啥玩意? 这个软件能否后刷进机器人系统?关于第二个问题,近期有不少客户询问本助手,这个软件可以后刷到系统里卖面吗?可以 ...

使用Azure Bot创建一个智能聊天机器人|附源代码

[2018-01-09]  首先,需要在Azure门户上创建一个帐户。只有这样,我们才能在云环境中托管应用程序。在左侧菜单上单击New,它将打开Azure Marketplace,在那里我们可以看到服务列表。点击AI +认知服务...

机器人如何赢得人类信任?普渡大学研究小组正在探索

[2018-12-15]  该测试使研究人员能够识别与智能系统中人类信任相关的心理生理特征,并相应地建立信任传感器模型。假设信任水平在可靠的试验中很高,在错误的试验中较低,使用从581名在线参与......

移动机器人的视觉算法解析

[2018-12-03]  如果对移动机器人视觉算法进行拆解,你就会发现获取物体深度信息、定位导航以及壁障等都是基于不同的视觉算法,本文就带大家聊一聊几种不同但又必不可少的视觉算法组成。...