爱吧机器人网 » 技术 > 机器学习 > 正文

深度学习 带我们走进人工智能时代

  虽然我们还不能很清晰地解释机器人深度学习成功的原因,但大体上以下几个观点还是得到普遍认可。

  一、模型强大的拟合能力、高密度的计算能力、海量的训练数据是深度学习获得成功的重要因素。通过大量的神经元非线性操作,深度神经网络获得了很强的拟合能力。利用GPU等高密度计算设备,网络模型能够基于海量的训练数据(百万级)在可接受的时间内(数天)完成训练。

  二、深度学习的应用范围非常广泛,可以渗透到很多领域。如果我们将深度学习看成是一个具有很强拟合能力的复杂函数,那么只要你能定义好合适的目标函数(比如最小化分类错误率),有足够的训练样本和计算资源,都可以通过深度学习来解决你的问题,而且其效果往往会出乎意料的好。

  三、现在很成功的各种深度模型不代表一定是未来的模型。深度模型本质上也可以看成图模型,神经元是节点,神经元之间的连接是边。现在找到的几种实际很有效的结构,比如,卷积神经网络、深度置信网络、递归神经网络(RNN),它们准确率较高,计算速度可以接受。但图模型结构本身可以非常多样,未来哪种结构更有效现在还不得而知,还需要更深层次的研究。

  四、对深度学习的追捧对学术界未必是好事。目前,深度学习在一些具体问题上取得了一些出乎意料的结果,但是在理论工作上进展不大。一个好的理论能够被接受需要好的理论创新和令人信服的实验结果,目前的现状是复杂的可解释的模型,其效果往往不如深度神经网络。这导致研究人员大多转向深度学习,将很多精力放在网络调参和结构设计上,尽管在实验效果上取得了很大进展,但理论贡献却微乎其微。

  五、深度学习目前仍然有计算瓶颈。目前百万级的训练数据借助GPU一般都能在几天内完成训练。实际使用时,利用GPU也可以在几十毫秒内完成预测。但对于普通移动终端,无论是内存容量还是计算能力,都远不能跟台式机或服务器的GPU比,深度学习实际上在移动终端几乎还不可用,这大大限制了深度学习的实用范围。

  六、传统模型与深度学习的融合是值得研究的问题。经过几十年的努力,机器学习有很多复杂的并且理论相对完备的模型,如何将这些模型引入到深度学习是值得研究的问题,比如一种简单的方案就是将传统模型的特征替换为深度学习获得的特征,然后基于最终的损失函数进行迭代优化。 

<上一页  1  2  

上一页12下一页

上一篇:机器人涂装线产生的VOCs怎么破?(附工艺图)
下一篇:玩转12款Linux开源机器人(多图)
精选推荐
2018年企业数字化转型的五大趋势
2018年企业数字化转型的五大趋势

[2017-12-16]  据2016年哈佛商学院研究表明,选择进行数字化转型的企业在3年内表现出了55%的平均毛利润提升,相比之下其他企业毛利润同期降低了37%。数字化转型企业的领头羊,也曾是收入处于......

新型轻便机器人套装重5kg,辅助跑步和步行
新型轻便机器人套装重5kg,辅助跑步和步行

[2019-10-23]  虽然步行对大多数人来说似乎不是负担,但对有些人来说,这项简单的运动往往会让人感到筋疲力尽。比如手术或中风后恢复的患者、帕金森氏症患 ...

麻省理工正研究植物机器人 让植物自主控制机器人
麻省理工正研究植物机器人 让植物自主控制机器人

[2018-12-08]  控制论通常指人类用机器人部件增强自己。我们听说过动物机器人或昆虫机器人,但我们很少听说植物机器人对吧?一个机器人其实是对植物有很大益处的,因为一般植物根本无法移动......

可编辑神经网络,有望简化深度学习?
可编辑神经网络,有望简化深度学习?

[2019-10-04]  深度学习是一个计算繁重的过程。 降低成本一直是 Data curation 的一大挑战。 关于深度学习神经网络大功耗的训练过程,已经有研究人员 ...

研究人员融合人类与AI的创造力 显著提高了深度学习的表现
研究人员融合人类与AI的创造力 显著提高了深度学习的表现

[2019-10-12]  由加拿大人工智能领域研究主席、滑铁卢大学系统设计工程教授Alexander Wong领导的一个团队开发了一种新型紧凑型神经网络家族,可以在智能 ...

助力卷积神经网络时空特征学习 史上最大行人重识别视频数据集被提出
助力卷积神经网络时空特征学习 史上最大行人重识别视频数据集被提出

[2017-12-25]  本文提出了一个大型的、长序列的、用于行人重识别的视频数据集,简称LVreID。与现有的同类数据集相比,该数据集具有以下特点:1)长序列:平均每段视频序列长为200帧,包含丰......

Crossbar将电阻式RAM推入嵌入式AI
Crossbar将电阻式RAM推入嵌入式AI

[2018-05-17]  电阻RAM技术开发商Crossbar表示,它已与航空航天芯片制造商Microsemi达成协议,允许后者在未来的芯片中嵌入Crossbar的非易失性存储器。此举是在先进制造业节点的领先代工厂选......

搭载人工智能的太空机器人CIMON 2乘SpaceX抵达国际空间站
搭载人工智能的太空机器人CIMON 2乘SpaceX抵达国际空间站

[2019-12-09]  12月5日,搭载人工智能的太空机器人西蒙2号(CIMON 2)乘坐SpaceX火箭Dragon货运舱,从佛罗里达州卡纳维拉尔角空军基地升空,前往国际空间 ...

本周栏目热点

盘点全球十大最具影响力的机器人摇篮

[1970-01-01]    人工智能(AI)研究现正迅速发展,如无人驾驶汽车、计算机在《危险边缘》智力竞赛节目中获胜、数字私人助手Siri、GoogleNow和语音助手C ...

深度学习反向传播算法(BP)原理推导及代码实现

[2017-12-19]  分析了手写字数据集分类的原理,利用神经网络模型,编写了SGD算法的代码,分多个epochs,每个 epoch 又对 mini_batch 样本做多次迭代计算。这其中,非常重要的一个步骤,......

如何在机器学习项目中使用统计方法的示例

[2018-07-23]  事实上,机器学习预测建模项目必须通过统计学方法才能有效的进行。在本文中,我们将通过实例介绍一些在预测建模问题中起关键作用的统计学方法。...

[2017-08-28]  模拟退火(Simulated Annealing,简称SA)是一种通用概率算法,用来在一个大的搜寻空间内找寻命题的最优解。1、固体退火原理:将固体加温 ...

Machine Learning-感知器分类算法详解

[2018-05-31]  今天我们来讲解的内容是感知器分类算法,本文的结构如下:什么是感知器分类算法,在Python中实现感知器学习算法,在iris(鸢尾花)数据集上训练一个感知器模型,自适应线性神......