基于卷积神经网络的双目图像匹配方法

来源 :中国科学院大学 | 被引量 : 0次 | 上传用户:cheer4you
下载到本地 , 更方便阅读
声明 : 本文档内容版权归属内容提供方 , 如果您对本文有版权争议 , 可与客服联系进行内容授权或下架
论文部分内容阅读
随着机器视觉技术的发展,基于单目、双目和激光雷达等传感器的无人驾驶技术也逐渐受到人们关注,例如应用于激光雷达传感器的DSO SLAM(Direct Sparse Odometry Simultaneous Localization and Mapping),应用于单目或双目的ORB(Oriented FAST and Rotated BRIEF)SLAM等,其中基于双目传感器的SLAM技术应用愈发广泛,其中双目传感器通过摄取的两幅图像的特征点匹配信息,结合双目相机结构参数,通过三角化定理进行目标定位,所以匹配精度的提高对目标定位至关重要。在多目标的环境中,由于外界环境干扰或图像纹理较为丰富,目标的匹配精度会有所下降,匹配精度会直接影响基于特征点匹配的SLAM算法定位精度,特征匹配也是许多计算机视觉问题的基础,随着深度学习的发展,结合深度学习提高特征点匹配精度是有研究价值的方向。目前主流的匹配方法有结合随机抽样的SIFT(Scale Invariant Feature Transform)、SURF(Speeded Up Robust Features)和ORB等,随机抽样迭代次数较高,计算量较大,对算法抽样次数不好设定等难题。为了获得图像中识别目标的高精度的匹配信息,随着深度学习的极大发展,本文对基于卷积神经网络的去除误匹配方法进行了研究。基于Image Net数据库训练卷积神经网络,对神经元激励,通过权值共享减少计算量,并通过梯度下降等方法进行参数调整。基于区域推荐网络对目标进行识别,并对目标进行逐像素的卷积处理,获得目标像素级别的切割信息。最后对双目数据集匹配进行去误匹配,对匹配区域进行已获取的识别标签信息匹配判定,若标签信息得到匹配,则保留目标轮廓区域内的匹配点。这样的匹配方法具有较好的鲁棒性,经仿真测试也得到了较好的印证。完成的主要工作包括:1、简单介绍了机器学习、无人驾驶和特征点匹配的研究意义以及国内外的研究进展。2、研究了几种典型特征点的匹配,包括算法具有的尺度不变性、方向不变型和而抗噪能力等的算法原理。并且分析了它们之间的优劣。3、对卷积神经网络的基本结构、传播方法、训练、以及基于卷积神经网络的典型算法进行仔细研究。4、为了提高多目标图像ORB匹配正确率,提出一种基于卷积神经网络ORB匹配方法,该算法首先通过Faster R-CNN方法对图像进行识别,运用区域推荐网络得到矩形框标注的感兴趣区域和类别标签,该步骤可以得到感兴趣区域的预测类别和坐标信息,并且通过全卷积网络卷积层进行像素级别校正,得到像素级别的目标所属类别,然后进行目标分割。最后在原有ORB特征点匹配基础上,剔除两幅图像中相同目标分割区域以外的误匹配点。5、为了验证该方法的有效性,对传统ORB匹配与基于本文方法的ORB匹配进行了仿真实验,并对实验数据进行分析。
其他文献
本文主要研究了平面连杆机构的可视化输入及结构分解、运动分析与力分析的自动求解与可视化运动仿真。 首先根据机构的基本组成及型转化理论,采用面向对象的思想和技术对平面连杆机构进行自然地分解;确定出了型转化法机构分析系统需要使用的对象和类;建立了合理的数据结构及适当的类等级,从而完成了整个软件系统的面向对象分析和设计模型。并用面向对象的C++语言实现了所有类的定义。 ...
在金融科技创新领域,法律制度的生命力在于对金融创新实践的承认、共识和规范化,而非以既有的制度来格式化市场和实践对新型交易模式的需求.智能投顾规制的主要问题在于全权
本论文建立在已有的港口装卸机械管理的研究基础之上,进一步提出了以可靠性为基础的港口装卸机械的管理思想,已有的研究表明,港口机械设备破坏主要由于两个原因,第一是稳定性问题,特别是构件的局部稳定性,所谓稳定性是指:在板的平面内,板受到平行于板面的压力作用,使板发生隆起、内陷等凹凸不平的结果,从而使板受载能力减弱;第二是结构出现疲劳裂纹及其扩展,这是由于设备长时期运行,而造成设备某些部位出现裂纹并得以扩
发牢骚的苏学士“死”了rn1080年,苏轼的仕途终止于乌台.rn这年初春,寒意尚未褪去,刚刚经历牢狱之灾的中年男人苏轼踏上了黄州之路.这一路风尘仆仆,前途未知.rn上路的前一年,
期刊
从呼吸生理学的角度来看,肺是身体的一部分,是维持生命所需气体的交换场所;从流体力学的角度来看肺体又是一个复杂的流场。气体在肺内传输和扩散的研究属于呼吸生理学和流体力学