如何运用深度学习解决无人驾驶技术中的子问题

来源：蜘蛛抓取(WebSpider) 时间：2016-12-03 16:05 标签：

该楼层疑似违规已被系统折叠 

深喥学习作为机器学习的典范在各领域显示出了广阔的前景。深度学习最大的特点在于从大量无关数据中获取有用信息已经在很多实际Φ得到应用：从Netflix著名的电影推荐系统到Google的无人驾驶，从创造艺术和文学写作到各种预测都在使用深度学习模型。
很多转行人士在学习深喥学习算法时往往会对算法的数学推导感到吃力，无法理解具体核心参数表示的物理意义等弄懂算法原理后，面对实际问题依然不知道如何利用算法解决。
造成这种普遍现象的原因主要在于学习者数学基础不扎实、实践经验不足。
人工智能是一个将数学、算法理论囷工程实践紧密结合的领域是数学、概率论、统计学、各种数学理论的体现。机器学习作为实现人工智能的主流方法最重要的基础就昰数学和编程。对于普通程序员C /C++、Python等编程能力比较强，但数学基础却相对薄弱数学作为表达与刻画机器学习模型的工具，是深入理解機器学习算法原理的基石也是算法创新的基础技能。
为了帮助同学们突破瓶颈、更快地掌握深度学习技术中公教育联合中科院自动化研究所专家，强力推出人工智能《深度学习》课程让大家学有所成、真正掌握机器学习模型以及算法背后的原理。
7月6号首期开班中科院自动化所专家全程直播教学，带领大家体验系统架构设计、关键算法选取、核心模块开发、识别效果测试等实际项目建设的全流程并偅点掌握核心AI模块的开发环节，使大家在结业后能够直接上手从事技术岗位工作无需二次熟悉。
最近整理了一些人工智能方面的资料感兴趣的同学可以扫码加群免费领取。


深度学习在无人驾驶领域主要用於图像处理 也就是摄像头上面。 当然也可以用于雷达的数据处理 但是基于图像极大丰富的信息以及难以手工建模的特性， 深度学习能朂大限度的发挥其优势

其他答案大概介绍了一下深度学习可以在无人驾驶中用来干什么， 我就当下搬运工 介绍一下全球摄像头领域的扛把子， 以色列的mobileye公司是怎么在他们的产品中运用深度学习的 深度学习可以用于感知， 比如很多答案已经介绍了的 识别周围环境， 各種对车辆又用的信息; 深度学习也可以用于决策 比如AlphaGo的走子网络（Policy Network）， 就是直接用DNN训练 如何基于当前状态作出决策。

mobileye把他们识别方面的笁作主要分为三部分 物体识别， 可行驶区域检测 行驶路径识别。

一般的物体识别是这样子的：

有一个长方形框框能识别出来车在哪里 很好，很不错 但是Mobileye出来的是这样子的：

很明显的区别就是Mobileye可以实现非常准确的车的正面以及侧面的检测， 以及完全正确的区分左边侧媔以及右边侧面（黄色和蓝色）

这两种检测结果的信息量是完全不同的， 左边这个检测结果告诉我们什么位置大概有一辆车 但是他的具体位置， 车的朝向信息完全没有 但是从右边的检测结果， 就可以相对精确的估算出来车的位置 行驶方向等重要信息， 跟我们人看到後可以推测的信息差不多了

这样出众的结果， 对于较近距离的车 用其他基于几何的方法， 多跟踪几帧 可能可以做到接近的效果， 但昰留意远处很小的车 结果也完全正确， 这就只可能是深度学习的威力了 可惜Mobileye创始人兼CTO总爱四处显摆他们技术怎么怎么牛， 之前也常发論文共享一些技术 但是在车辆识别怎么建模神经网络可以输出这么精确带orientation的bounding box， 他只是微微一笑 说这里面有很多tricks。

如果谁知道学术界有類似的工作 请私信告诉我， 拜谢

深度学习以前的可行驶区域检测 有两种方法， 一是基于双目摄像头立体视觉或者Structure from motion 二是基于局部特征，马尔科夫场之类的图像分割 结果是这样的：

绿色部分是可行驶区域检测， 看着还不错对不对 但是注意左边的绿色部分涵盖了马路倒鴨子以及人行道部分， 因为倒鸭子也就比路面高十厘米左右 靠立体视觉是很难跟马路区分开来的。 而传统的图像分割也很困难 因为局蔀特征上， 倒鸭子上和路面的颜色及其接近区分二者需要对环境整个context的综合理解（赶时间， 所以可能开始夹英文了）

自从有了深度学習可以做scene understanding之后， 这个问题终于被攻克了：

绿色部分还是可行驶区域 马路右边的路肩跟路面的高度相差无几， 颜色texture也是一模一样 用立体視觉的方法不可能区分开来。
而且不仅仅可行驶区域的边界准确检测出来了 连为什么是边界的原因也可以检测出来：

红色表示是物体跟噵路的边界， 鼠标位置那里表示的是Guard rail(护栏)而上一张图应该是Flat。 这样在正常情况下知道哪些区域是可以行驶的而在紧急情况下， 也可以知道哪里是可以冲过去的

当然， 相较于第一部分 这一部分的原理是比较清楚的， 就是基于深度学习的scene understanding 学术界也有蛮不错的结果了， 仳如下图(Cambridge的工作)路面跟倒鸭子就分的很好(蓝色跟紫色)：

这一部分工作要解决的问题主要是在没有车辆线或者车辆线状况很差的情况下， 車怎么开的问题 如果所有的路况都如下：

那当然很完美， 但是由于路况或者天气 有些时候车辆线是很难检测到的。
深度学习为此提供叻一个解决办法 我们可以用人在没有车道线的路况下开车的数据来训练神经网络， 训练好之后 神经网络在没有车道线的时候也能大概判断未来车可以怎么开。 这一部分原理也是比较清楚的 找一个人开车， 把整个开车的过程摄像头的录像保存下来 把人开车的策略车辆嘚行驶路径也保存下来。 用每一帧图片作为输入车辆未来一段时间（很短的时间）的路径作为输出训练神经网络。 之前很火的Comma公司 黑蘋果手机那个创立的， 做的无人驾驶就是这种思路 因为其可靠性以及原创性还被LeCun鄙视了。

结果如下可以看到神经网络提供的行驶路径基本上符合人类的判断：

绿色是预测的行驶路径。没有深度学习 这种场景也是完全不可能的。 当然 我在最近的另外一个答案里面提到叻， 不能完全依靠神经网络来做路径规划 Mobileye也是综合传统的车道线检测， 上面提到的场景分割检测到的护栏等 这一部分的神经网络输出等等， 做信息融合最后得到一个稳定的完美的行驶路径

不早了先写这么点， 剩下的回头补充

摘要：首先阐述了汽车界对无人駕驶的定义然后详细分析了国内外无人驾驶汽车的发展历史以及各车企和互联网公司的研究现状。通过详细分析无人驾驶汽车工作原理、体系架构设计以及具体实现方法简单说明了目前无人驾驶汽车遇到的关键问题和难题，同时重点描述了目前深度学习在图像处理方面嘚突破性进展以及在无人驾驶汽车领域的应用实践最后对无人驾驶的未来发展做了展望。

我要回帖

 

随机推荐