基于视觉惯导融合的智能车辆定位技术研究

来源 :电子科技大学 | 被引量 : 0次 | 上传用户:liqihua2009
下载到本地 , 更方便阅读
声明 : 本文档内容版权归属内容提供方 , 如果您对本文有版权争议 , 可与客服联系进行内容授权或下架
论文部分内容阅读
随着国民经济以及科技的发展,智能车辆作为移动机器人皇冠上的明珠正在如火如荼的发展中。在未知的环境中,基于多传感器融合的同时定位与建图(Simultaneous Localization and Mapping,SLAM)技术是支撑智能车辆实现自主导航并完成指定任务的关键基础。由于实际行驶环境的复杂性,搭载于智能车辆上的SLAM系统的精度以及鲁棒性仍难以满足需求。因此,本文以智能车辆在复杂未知环境里自主定位建图问题为背景,利用相机、惯性导航传感器之间的互补性,针对视觉惯导紧耦合的SLAM关键技术开展研究,设计了一套完整的基于非线性优化架构的视觉惯导导航系统(Visual Inertial Navigation System,VINS),解决智能车辆复杂场景适应性问题。主要工作如下:1.对智能车辆以及VINS系统的国内外发展现状进行了调研,针对应用于智能车辆VINS系统,定义其所涉及的坐标系,建立车辆运动学模型、相机观测模型和惯性传感器运动模型,并基于上述模型建立智能车辆VINS问题的整体架构,为应用于智能车辆的VINS关键技术研究搭建研究平台。2.消失点是利用二维图像构建并理解三维世界的重要特征,针对车载连续视频流消失点估计问题,出基于光流检测和边缘检测相结合的消失点估计算法。光流本质是视频流中相邻帧之间的运动场,实际车辆的行驶方向大多数与道路边界或车道标线平行,运动场指向消失点,因此,结合边缘和光流来投票估计消失点可以高算法的鲁棒性,最终实验结果表明,该算法能供实时且准确的消失点位置,为停止检测算法图片分割供重要的三维场景结构线索。3.出融合停止检测的视觉惯导定位算法。当前,大多数的VINS系统假定环境大面积静态,而智能车辆所处的场景通常具有高动态性,因此该假设极大地限制了VINS的实用性。智能车辆在高动态场景下停止后,环境中存在的大量运动特征点给特征跟踪线程引入误匹配,这将导致轨迹的漂移和建图精度的降低,甚至使得系统重置。为解决上述问题,本文在VINS前端出改进的相位相关算法来取相邻图像帧的精确运动信息;在后端,引入停止约束优化滑窗内的状态变量,以解决智能车辆在高动态场景停止期间轨迹漂移问题,实验结果表明本算法能极大高复杂场景下智能车辆停止期间位姿估计精度。4.出融合运动学约束的视觉惯导定位算法VINS-Motion。本方法利用车辆运动学约束简化运动模型,将视觉、惯导和车辆运动特征耦合进行位姿估计。该算法在前端加入前文出的停止检测模块,在后端处理中,若前端检测到车辆处于停止状态,则在滑窗内根据停止约束进行优化;否则,除了已有的边缘化先验信息构造的残差项、IMU预积分残差项和视觉重投影残差项之外,根据阿克曼转向模型构建车辆朝向/速度残差,并推导该残差项关于待优化变量的雅克比矩阵,最后最小化四个残差项的加权和以获得待优化状态变量最大后验估计,从而分别在停止和运动期间高系统的一致性和准确性。在KITTI数据集上的实验结果表明VINS-Motion在挑战性场景中具有明显性能升。5.出基于IMU信息自适应辅助视觉特征点识别算法(Self-Adaptive Feature Correspondences Identification,SFCI),进一步将SCFI算法紧融合到VINS前端数据处理单元,命名为VINS-SFCI。SFCI算法利用IMU预积分的结果预测新图像帧的位姿,在弱纹理信息和运动模糊的情况下,为了增加特征匹配对的数量和跟踪长度,利用IMU预测的位姿来搜索潜在的匹配对,并融合视觉信息建立新的匹配对;另一方面,IMU预测的位姿同时可消除动态物体引入的误匹配。实验结果表明,SFCI算法有效地高了特征匹配的精度和跟踪长度,VINS-SFCI系统通过供更鲁棒的视觉特征点跟踪结果,实现了智能车辆复杂场景的精确定位。针对以上研究内容,本文完成了系统性的验证和分析,结果表明所出的算法在挑战性场景中具有明显的性能增益,彰显出重要的实用价值。本文的研究有助于高VINS系统应用于智能车辆的鲁棒性和智能化,对其在实际复杂场景的落地部署具有积极意义。
其他文献
随着在线社交网络(Online Social Networks,OSNs)的出现,人们创造和分享信息的方式发生了变化。在OSNs上,信息传播变得比传统社交媒体更快、更广泛。了解信息如何通过OSNs传播,以及哪些因素推动了信息传播的成功,对现实世界的广泛应用有重大意义。本论文基于深度表示学习对信息传播进行分析。具体地,本论文首先研究信息级联的建模与预测,然后在此基础之上,研究基于传播分析的OSNs谣
遥感与作物生长模型作为区域产量估测的两类重要科学手段,已经得到了广泛应用和验证。数据同化技术融合了遥感的大面积信息获取能力和作物生长模型的机理过程特性优势,是提高区域估产精度的重要方法之一。然而,当前作物模型遥感同化中还存在不确定性量化不明确、高空间分辨率遥感数据同化效率偏低的问题,而基于贝叶斯理论的马尔科夫链蒙特卡洛(Markov Chain Monte Carlo,MCMC)方法在依据少量的地
农业是国家发展的基础产业,外交是维护国家利益的重要手段,农业外交是农业和外交的良性互动,旨在以农业国际合作服务于国家整体外交战略,以国家外交战略的实施推进农业对外合作。农业外交是农学与外交学的交叉学科,依托各国的农业外交实践“开枝散叶”,塑造了以行为体数量、行为体地位、农产品流向等为中心的互动类型,呈现出外交任务的选择性、外交意图的模糊性、战略目标的长期性、外交实施的时效性、外交机制的多样性、外交
功率MOSFET和以其为核心的功率集成电路是电力电子系统实现电能转化、电压变换的关键,广泛用于消费、工业、汽车及航空航天、军事等重大需求,无论何种场景,功率MOSFET作为能源转换的“心脏”直接影响系统的整体性能,因此器件的结构设计至关重要。随着应用需求日益增长,在追求元胞尺寸、功率密度提升的同时,更高的设计容差、更优的动态特性成为设计中的关键,众多学者研究表明,元胞尺寸减小导致的设计窗口收缩为性
在数据爆炸的时代,云存储已经成为了一种特别流行的存储方式,它为用户提供了一种快捷、方便的数据管理方式。然而在云存储中,数据可能会面临着各种各样的安全威胁:(1)当访问云服务器获取云存储服务时,用户需要向云服务提供商认证自己的身份;现有的研究工作大多会遭受口令猜测攻击,无法实现云服务提供商安全高效地认证用户的身份。(2)当外包数据时,不同的用户可能会上传相同的数据到云服务器,为了确保数据的机密性,不
草地是最重要的可更新的自然资源之一,为人类生存和发展提供了多种的生态系统服务,草地管理的好坏不仅关系到畜牧业的可持续发展还关系着区域生态环境的功能。放牧和刈割对草地的生长具有非常重要的影响。羊草作为温带干旱半干旱地区的优势物种,是动物放牧和舍饲主要的食物来源,对畜牧业的发展具有重要的意义。因此,分析放牧和刈割对羊草生长的影响,对于科学管理和利用羊草草地资源具有重要的意义。本文以松嫩草地羊草为研究对
土壤水分是水文学中的一个关键参量,其对估算蒸发、蒸腾、侵蚀、径流、入渗和灌溉需水量具有重要意义。与站点观测相比,卫星遥感技术可以提供更大空间和时间上的土壤水分数据,然而卫星遥感仅能探测土壤表层几厘米的水分。根区土壤水分作为联系地表水与地下水的纽带,影响水文循环及植被耗水,深入了解其时空动态对于研究区域和全球尺度的气候变化及水资源管理至关重要。同时,高时空分辨率的根区土壤水分估算也能够为指导农业管理
多输入多输出(Multiple-Input Multiple-Output,MIMO)雷达作为一种新体制雷达,能够通过多个天线发射不同的信号,然后再在接收端通过多个天线接收并处理目标回波,以完成对目标的检测以及参数估计。相比于传统只能发射单一波形的相控阵雷达,MIMO雷达由于其波形多样性的特点,在发射信号设计以及接收信号处理方面具有更多的自由度,从而能够显著改善目标探测、参数估计以及干扰抑制等方面
近年来,随着并行计算和图像处理单元的高速发展,深度学习技术不断发展,并带来了从软件算法至硬件结构方面海量的资源。若将其应用于传统微波领域中,将具有广阔的应用前景。一方面,日趋加快的无线通信技术迭代周期要求更低廉的设计成本与更快速的设计过程,使得更快速、高效的设计微波器件和天线变得至关重要。另一方面,大容量的信息传输对于传统提升信道容量的方法提出了新的挑战,使得研究扩大信道容量新型方法成为了一大研究
随着互联网的不断发展和终端设备性能的不断提升,数字媒体信息越来越丰富,并呈现模态多样化的特点,主要模态包括文本、图像、视频、音频等。为实现从如此复杂多样的信息中检索有用信息,跨模态检索作为一种可以在不同模态数据之间任意检索的方式,成为了近些年的研究热点。然而,由于跨模态数据存在“异构鸿沟”,当前跨模态检索任务存在跨模态数据语义不平衡、跨模态“相似”和“不相似”性难以度量、跨模态关联关系语义难以提取