爱吧机器人网 » 技术 > 机器人学 > 正文

加州大学伯克利分校研究员用ARKit训练机械臂分拣物品

加州大学伯克利分校的人工智能研究人员正在使用iPhone X和ARKit来训练机器人手臂分拣物品。这属于Dex Net AR项目的内容,并主要是研究如何通过消费者智能手机来实现机器人分拣物品。其中,通过利用将RGB摄像头围绕物品扫描两分钟而生成的数据,ARKit可以创建相应的点云。

机器人抓取是一个特殊的机器人学分支,并主要是研究如何教导机器人拾起、移动、操纵或抓取物体。加州大学伯克利分校自动实验室(UC Berkeley’s Autolab)的Dex Net(灵巧网络)研究项目可以追溯到2017年,并且包括开源培训数据集,以及在电商货物分拣场景中实现机器人操作的预训练模型。机器人快速学习如何抓取对象的能力将对亚马逊物流中心等自动化仓库的发展存在巨大影响。

在包含八个物体的早期实验中,Dex Net AR可以将ARKit扫描转换成ABB YuMi机器人的深度映射,并以95%的成功率分拣物体。作为说明,每次扫描都会创建一个点云。

名为《Dex-Net AR: Distributed Deep Grasp Planning Using an Augmented Reality Application and a Smartphone Camera》的论文介绍道:“随着摄像头在空间中移动,点云的密度增加,这可以更好地检测和定义对象的表面,从而方便机器人抓取物品。Dex-Net AR能够以类似于依靠昂贵工业级深度传感器的最先进系统的精度来实现物体抓取。与从固定视图(通常是自上而下)捕获图像的深度摄像头系统相比,Dex Net AR允许用户用智能手机摄像头围绕对象移动并收集三维点云数据。”

相关论文:Dex-Net AR: Distributed Deep Grasp Planning Using an Augmented Reality Application and a Smartphone Camera

Dex-Net-AR采用离群值消除算法和k近邻算法来消除ARKit点云估计误差所引起的噪点。然后,Dex-Net抓取规划器将评估机器人应如何拾取对象。

由于每一次ARKit扫描都需要固定的两分钟,所以研究人员在未来的研究中将寻找更快速扫描物体的方法。论文写道:“一个潜在的改进是,如果只有有限的数据,我们可以尝试使用基于学习的方法来减少视频捕获的时间,从而增加和完成点云数据”。研究人员同时计划探索如何更好地利用iPhone X深度传感摄像头来收集更少噪点的点云数据。


上一篇:厦大提出数字微流控新方法,让软体机器人一体化设计制造变简单
下一篇:最后一页
精选推荐
麻省理工正研究植物机器人 让植物自主控制机器人
麻省理工正研究植物机器人 让植物自主控制机器人

[2018-12-08]  控制论通常指人类用机器人部件增强自己。我们听说过动物机器人或昆虫机器人,但我们很少听说植物机器人对吧?一个机器人其实是对植物有很大益处的,因为一般植物根本无法移动......

机器人工程师具体都做什么?
机器人工程师具体都做什么?

[2017-12-08]  机器人工程师是幕后设计师,负责创建机器人和机器人系统,能够执行人类无法完成或不愿意完成的任务。 通过他们的创造,机器人工程师帮助工作更安全,更轻松,更高效,特别是......

受大脑控制的机器人
受大脑控制的机器人

[2017-03-21]   想让机器人做我们想做的,首先,他得全面地了解我们。通常,这就意味着人类需要要付出更多。比如,教机器人复杂的人类语言或者把一项任务 ...

机器人灵巧手将成为智能机器人的下一个重大突破
机器人灵巧手将成为智能机器人的下一个重大突破

[2018-01-25]  计算机科学教授兼东北地区助手机器人实验室负责人罗伯特·普拉特(Robert Platt)说:“机器人手操作是下一步要解决的问题。想象一下,一个机器人可以在现实世界中用手去做事......

一个让深度学习惨败的通用人工智能领域——语境处理
一个让深度学习惨败的通用人工智能领域——语境处理

[2019-11-04]  Context是指用来解释一段给定文本或语句的来源框架,我们可以翻译为上下文或语境。维基百科将context定义为:*在符号学、语言学、社会学和 ...

国外眼科手术机器人为视网膜静脉阻塞患者带来希望
国外眼科手术机器人为视网膜静脉阻塞患者带来希望

[2017-03-20]  视网膜静脉阻塞,简称RVO,对患者来说是一种严重的疾病。该病病因为视网膜静脉中存在血液凝块,这可能导致视力严重下降,在某些情况下,病 ...

通过对抗性图像黑入大脑
通过对抗性图像黑入大脑

[2018-03-02]  在上面的图片中,左边是一张猫的照片。在右边,你能分辨出它是同一只猫的图片,还是一张看起来相似的狗的图片?这两张图片之间的区别在于, ...

机器人iCub作为嵌入式AI的标准机器人研究平台的重要性
机器人iCub作为嵌入式AI的标准机器人研究平台的重要性

[2017-12-24]  机器人的研究在过去10年中得益于一个具有嵌入式人工智能(AI)的标准化开源平台——人形机器人iCub。iCub最初在意大利被创建,如今在欧洲、美国、韩国、新加坡和日本的实验室......

本周栏目热点

机器人离线编程误差来源分析及消除办法

[2018-01-02]  随着机器人应用领域越来越广,传统的示教编程这种编程手段有些场合变得效率非常低下,于是离线编程应运而生,并且应用越来越普及。初用离线编程的朋友,总会被最后生...

全面了解机器人的精度

[2018-05-07]  1 绝对精度是啥玩意? 这个软件能否后刷进机器人系统?关于第二个问题,近期有不少客户询问本助手,这个软件可以后刷到系统里卖面吗?可以 ...

使用Azure Bot创建一个智能聊天机器人|附源代码

[2018-01-09]  首先,需要在Azure门户上创建一个帐户。只有这样,我们才能在云环境中托管应用程序。在左侧菜单上单击New,它将打开Azure Marketplace,在那里我们可以看到服务列表。点击AI +认知服务...

机器人如何赢得人类信任?普渡大学研究小组正在探索

[2018-12-15]  该测试使研究人员能够识别与智能系统中人类信任相关的心理生理特征,并相应地建立信任传感器模型。假设信任水平在可靠的试验中很高,在错误的试验中较低,使用从581名在线参与......

移动机器人的视觉算法解析

[2018-12-03]  如果对移动机器人视觉算法进行拆解,你就会发现获取物体深度信息、定位导航以及壁障等都是基于不同的视觉算法,本文就带大家聊一聊几种不同但又必不可少的视觉算法组成。...