自动驾驶中的计算机视觉技术——ICCV2015主题报告回顾

简介: 自动驾驶汽车过去只出现在科幻作品中,而现在似乎已经离我们近在咫尺,这得益于近年来计算机视觉、机器学习等技术的高速发展以及计算机硬件处理能力的飞速提升。在这些新技术中,计算机视觉技术的进步对自动驾驶领域起到了极其重要的作用。

自动驾驶汽车过去只出现在科幻作品中,而现在似乎已经离我们近在咫尺,这得益于近年来计算机视觉、机器学习等技术的高速发展以及计算机硬件处理能力的飞速提升。在这些新技术中,计算机视觉技术的进步对自动驾驶领域起到了极其重要的作用。今天,我们以回顾ICCV2015主题报告的形式为大家简要介绍究竟有哪些计算机视觉技术应用到了自动驾驶领域。

2015年,在计算机视觉领域中的顶级会议ICCV中,组委会针对自动驾驶专题,邀请了来自戴姆勒、丰田、牛津大学、博世公司等世界顶级研究者做了主题报告。下面为大家推荐这次主题报告的网站:https://sites.google.com/site/cvadtutorial15/materials
(其中包括了演讲人的PPT,内容非常充实,有很多他们推荐的种子文章,感兴趣的同学可以参考)

下面简要介绍一下这次主题报告的框架和大致内容,主要分为8个部分:
1) 自动驾驶领域的简要介绍:
自动驾驶的需求,现在分为5个自动化程度等级的定义,简要发展史。随后提出了自动驾驶的基本问题,即:(1)车在哪?(2)车周围有什么?(3)下面会发生什么?(4)车该怎么做?有了这些基本问题,计算机视觉能帮助我们解决什么呢?比如:检测路牌,和周围的车辆展开互动,了解周围发生了什么等等。
image

2)双目视觉在自动驾驶中的应用:
由于双目视觉能够获得dense的三维信息,图像可以获得“语意”信息(理解图像哪部分是什么,比如:“公路”,“树丛”等等),而且双目视觉的准确性和鲁棒性优秀,所以被使用在自动驾驶领域。随后,主讲人介绍了双目视觉的原理,在自动驾驶领域中的发展历程。之后,详细介绍了所在的戴姆勒公司所用的一些技术,包括:(1)stixel对真实世界进行“语意”表达;(2)利用卡尔曼滤波进行汽车并线的方法;(3)基于深度学习的物体归类方法; (4)基于CNN的交通灯检测。最后,演讲人列举了一些目前的技术挑战。
image

3)多传感器融合在自动驾驶中的应用:
由于自动驾驶对可靠性的要求,而不同传感器的优势又各不相同,所以被用作不同功能。这些传感器包括但不限于:定位系统(GPS, 惯导系统等),3D激光雷达,雷达和相机。演讲者首先介绍了他们(丰田)整个环境感知系统的架构以及每个传感器可能的用途,随后着重介绍了基于视觉的跟踪和传统跟踪方法的异同,以及如何进行数据融合的方法。
image

4)基于“语意”的环境理解:
首先介绍了几组通过“语意”进行环境理解的数据集,然后按由低到高的顺序,从像素级语意分类,到基于区域的分类,最后到利用深度学习的“语意”分类进行逐步深入的介绍。
image

5)机器人为环境自动建图:
将建图过程分为两部分分别介绍:(1)相机相对姿态的确定;(2)全局相机姿态的优化。将第(1)部分又拆解为5步完成,即:特征点检测->特征点匹配->特征点跟踪->飞值检测和剔除->利用有效数据的最优化求解。第(2)部分则介绍了相机姿态基于图论的全局最优化方法,包括常见的闭环检测等。
image

6)自动驾驶中的定位问题:
首先阐述了定位在自动驾驶中的重要性。然后顺序介绍了基于标志物(如:车道,信号灯等)的定位,传感器融合进行定位,以及如何利用GPS进行粗初始化定位的方法。
image

7)相机与其他传感器的时空信息融合:
首先介绍了相机内参的标定工具,然后介绍了相机外参的校正、多传感器的时钟同步、多传感器间的空间校准以及利用特定传感器pair进行特定功能的解决方案。最后,演讲人介绍了其主题在汽车领域的应用。
image

8)NVIDIA深度学习平台
image

以上是对这次主题报告的粗略总结,水平有限,如有错误还望指正,谢谢~

目录
相关文章
AIGC核心技术——计算机视觉(CV)预训练大模型
【1月更文挑战第13天】AIGC核心技术——计算机视觉(CV)预训练大模型
753 3
AIGC核心技术——计算机视觉(CV)预训练大模型
计算机视觉(CV)技术的优势和挑战
计算机视觉(CV)技术的优势和挑战
175 0
计算机视觉技术介绍
【10月更文挑战第14天】 计算机视觉技术介绍
计算机视觉的实践与挑战:技术深度剖析
【8月更文挑战第21天】计算机视觉技术作为人工智能的璀璨明珠,正逐步深入到我们生活的各个方面,带来前所未有的便利和变革。然而,随着技术的不断发展,我们也面临着诸多挑战和问题。未来,我们需要不断推动技术创新和跨学科合作,加强数据安全和隐私保护,提升算法的鲁棒性和可解释性,以应对这些挑战并推动计算机视觉技术的持续发展。让我们共同努力,探索计算机视觉技术的广阔天地,为创造一个更加智能、安全和美好的世界而不懈努力。
计算机视觉在自动驾驶中的应用:技术解析与未来展望
【8月更文挑战第4天】自动驾驶依托计算机视觉实现环境感知与决策,通过目标检测、跟踪及车道识别等技术保障行车安全与效率。面对数据处理、场景理解等挑战,未来技术将持续优化,深化智能驾驶体验,引领交通行业变革。
Ebsynth:利用图像处理和计算机视觉的视频风格转换技术工具
EbSynth 是一款基于视频风格转换技术的工具,专注于将静态艺术风格应用到视频中的每一帧,使视频具有独特的艺术效果。它利用图像处理和计算机视觉技术,将用户提供的参考图像或绘画风格转换为视频效果。
236 2
计算机视觉技术在安防领域的应用深度解析
【7月更文挑战第28天】计算机视觉技术作为人工智能领域的重要分支,在安防领域的应用前景广阔。通过不断提升技术性能和解决实际应用中的问题,计算机视觉技术将进一步提升安防工作的效率和准确性,为公共安全和社会稳定贡献更大的力量。
高效能计算机视觉技术在工业自动化中的应用与发展
随着工业自动化的迅速发展,高效能计算机视觉技术正成为关键驱动力。本文探讨了计算机视觉在工业自动化中的重要性,以及其应用和未来发展趋势。通过深入分析现有技术和案例研究,展示了计算机视觉如何提升生产效率、质量控制和安全性,并展望了其在智能制造中的潜力。 【7月更文挑战第13天】
132 1

热门文章

最新文章

AI助理

你好,我是AI助理

可以解答问题、推荐解决方案等