基于非对称判别相关滤波器的目标跟踪算法研究

来源 :四川大学 | 被引量 : 0次 | 上传用户:gaolch014
下载到本地 , 更方便阅读
声明 : 本文档内容版权归属内容提供方 , 如果您对本文有版权争议 , 可与客服联系进行内容授权或下架
论文部分内容阅读
目标跟踪作为计算机视觉领域的一个重要研究课题,在智能监控、智能交通、生物医学、农业和军事等诸多领域有着广阔的发展和应用前景。近年来目标跟踪技术的研究取得了很大进步,深度学习在该领域的应用得到迅速发展,尽管如此,目标跟踪仍然面临着一系列的挑战,例如目标形变大、摄像机视角变化大、目标遮挡、目标尺度多变、目标运动速度过快、图像分辨率低、实时性要求等等。特别是在无人机目标跟踪领域,由于机载的计算资源、电池容量和无人机最大负重等条件的限制以及低功耗要求等,基于深度学习的目标跟踪算法在无人机上的部署仍缺乏可行性。基于判别相关滤波器的目标跟踪算法因兼顾跟踪精度的同时具备较高的CPU速度,尽管跟踪精度不及基于端到端的深度学习的目标跟踪算法,仍受到研究者和技术人员的广泛关注,特别是在无人机目标跟踪领域备受欢迎,因此具有重要的研究价值和应用前景。虽然基于判别相关滤波器的目标跟踪算法相比于传统的目标跟踪算法已经有了明显的性能提升,但是此类算法仍存在一些需要深入研究的问题。例如相关(卷积)算子的平移等变性不能忠实地反映目标平移的问题,其对称性会降低模型的可伸缩性的问题和判别相关滤波器目标跟踪算法中广泛采用的判别尺度估计不够精确的问题等。针对这些问题,本文提出了广义平移等变性和弱广义平移等变性的概念,对卷积算子进行了推广,提出了非对称卷积算子以及由其构造的非对称判别相关滤波器,并提出了求解算法及改进的求解算法,另外,还基于GrabCut图像分割算法对判别尺度估计进行了改进。本文的具体工作和研究成果主要包括以下几个方面:1.证明基于相关算子构造的判别相关滤波器与基于卷积算子构造的滤波器(本文称为判别卷积滤波器)的等价性;提出广义平移等变性与非对称判别相关滤波器。基于判别相关滤波器的跟踪算法将目标跟踪转化成目标的特征模板与检测样本的候选区域进行匹配的问题,而相关滤波器提供了计算匹配相似度的手段。卷积运算通常用来表示一个观测系统对输入信号的作用过程,但实际上卷积滤波器同样可以实现跟踪的目的。此前没有文献严格讨论过二者的关系。本文证明了基于相关算子构造的判别相关滤波器与基于卷积算子构造的判别卷积滤波器,在理想滤波器响应为2D中心对称的高斯函数并且存在最优解的条件下,从估计的最小均方误差相等的意义上说是等价的。判别相关滤波器中卷积(相关)算子的平移等变性保证了当检测样本仅代表目标时,滤波器响应忠实地反映目标的平移。然而,循环卷积(相关)是一种对称算子,即被卷积(相关)的两个有限离散信号以相同的周期展开,交换两个信号的位置卷积(相关)结果不变。循环卷积(相关)算子的这种对称性给跟踪应用带来了不能忽视的问题。一方面,对称性要求滤波器的大小等于样本的大小,这降低了模型的可伸缩性,因为滤波器参数的数量和模型的复杂性随着样本的大小非线性增长。另一方面,卷积(相关)的平移等变性是用整个样本来定义的。如果样本大小与目标大小的比率大于1,则样本中包含背景,此时滤波器响应将不反映目标的平移,而是反映目标和背景混合的变化。然而,在目标跟踪领域,这一问题没有得到足够重视,甚至被完全忽视了。这一问题使得基于判别相关滤波器的跟踪算法的应用场景受到限制。为了澄清并应对这一问题,本文需要定义一种新的平移等变性,即广义平移等变性,它描述的是滤波器响应的平移变化只相对于目标的平移而非整个样本的平移,这才是目标跟踪所需要的平移等变性。但由于很难找到能满足这一性质的算子,本文又定义了弱广义平移等变性的概念,同时提出了一种非对称卷积算子并证明该算子在一定条件下满足弱广义平移等变性。本文将基于这种非对称卷积算子的滤波器称为非对称判别相关滤波器(ADCF),并证明由ADCF导出的正规方程的系数矩阵是一个分块矩阵,每个块是一个两级的块Toeplitz矩阵,这推广了判别相关滤波器中每个块是一个循环矩阵的情形。基于此,本文设计了块Toeplitz矩阵-向量积的快速算法用来求解ADCF。与基于判别相关滤波器的跟踪算法相比,在广义平移等变性变得重要的情况下,ADCF跟踪的精度提高非常显著。2.提出残差感知的非对称判别相关滤波器。尽管现有算法BACF(背景感知的相关滤波器)和本文提出的ADCF从出发点和数学形式上比较都不尽相同,但二者实质上是等价的,只是求解算法不同。本文从ADCF的正规方程具有两级的块Toeplitz矩阵结构出发构造了近似求解的算法,而BACF利用ADMM算法将原优化问题分解成独立的子问题,构造了并行求解的算法,求解效率要比前者高很多。尽管如此,基于ADMM求解非对称判别相关滤波器仍存在收敛慢和数值不稳定的问题。特别是,基于BACF的ARCF-HC算法在无人机目标跟踪领域的跟踪精度超过了先前所有基于判别相关滤波器的算法,但算法运行效率较低,每帧需要ADMM算法迭代五次,难以满足无人机目标跟踪对实时性的要求。受残差表示和残差学习,特别是深度残差网络ResNets可以减少破碎梯度(shattered gradient),提高网络学习和收敛速度以及提高数值稳定性的启发,本文利用视频相邻帧之间存在的残差本质提出了残差感知的非对称判别相关滤波器,显著改进了算法的收敛速度和数值稳定性,每帧只需要ADMM算法迭代两次,比ARCF-HC节省了非常可观的时间开销,而且残差感知的非对称判别相关滤波器相当于复合了几个优化目标函数,跟踪的精度也比ARCF-HC有所提高。另外,本文还成功引进时空正则化来提高残差感知的非对称判别相关滤波器的跟踪精度,而几乎没有增加额外时间开销。3.提出基于GrabCut图像分割算法改进判别尺度估计。自从引入判别的尺度估计之后,大部分基于判别相关滤波器的跟踪算法就沿用这一方法来估计目标物体的尺度变化,考虑改进目标物体尺度估计方法的工作相对很少。然而,尺度估计直接影响跟踪算法的精度。因为,一方面,跟踪算法的评价指标的计算直接依赖于估计的尺度;另一方面,滤波器的更新是建立在对目标物体尺度估计的基础上的;估计的尺度比实际尺度偏大时,代表目标的图像样本就会包含较多背景,而估计的尺度比实际尺度偏小时,代表目标的图像样本就只包含目标的部分,随着时间的推移,尺度估计的误差会不断累积,最终可能导致跟踪算法失跟。非对称判别相关滤波器由于滤波器大小相对于检测样本要小很多,更容易受到样本尺度变化的影响,对尺度误差非常敏感,更加需要精确的尺度估计。本文提出了利用GrabCut图像分割算法来改进基于(非对称)判别相关滤波器的跟踪算法中的判别尺度估计,显著提高了基于(非对称)判别相关滤波器跟踪算法在无人机目标跟踪应用中的精度。另外,本文提出的方法具有通用性,很容易融合到现有的基于判别尺度估计的目标跟踪算法中。
其他文献
随着多媒体技术、网络技术的发展,多媒体数字产品的复制与传播变得非常便捷。相应的,盗版行为也日益猖獗,给版权商带来了不可估量的经济损失。因此,急需有效的版权保护措施来遏制盗版行为。在这一背景下,学者们提出了数字水印技术,经过近年来的快速发展,已成功应用于多媒体数字产品的版权保护,挽回了盗版带来的经济损失。因而,研究数字水印技术,进一步提升其版权保护效果,是一项具有重要理论意义与应用价值的工作。音视频
在国家大力发展人工智能和“健康中国”的时代背景下,以人工智能为核心的智能医学被看作是未来医学的重要发展方向之一,同时也是多学科交叉的高尖科技。医学图像的精准分析是智能医学在科学研究、临床诊断和治疗中关键所在。丰富的影像资源使眼科成为了最适合开展人工智能诊断的一个研究领域,展现出广阔的临床应用前景。本文响应“十三五”眼健康规划,研究了眼底病变智能诊断的深度卷积神经网络方法,建立了糖尿病视网膜病变识别
肺癌与结直肠癌是当今致死率较高的两大恶性肿瘤,且常以肺结节及肠息肉形式作为其早期可能性表征。肺结节与肠息肉分割作为性状判断、体积度量、倍增速率跟踪等关键步骤的基础,能够为疾病分析及治疗提供可靠的数据支持。同时,准确的病灶分割结果还可以提升病灶特征提取、良恶性判断、三维重建及可视化等图像处理方法的精准程度。因此,无论是从提高医疗信息化水平的角度,还是从推动医学图像处理领域相关研究发展的角度,针对肺结
伴随深海探测技术的发展,我国提出了走向深蓝的战略布局。深海潜水器及相关装备是进行深海科学研究、环境检测和探索开发的必要装备。随着深海潜水器技术的不断发展,深海环境模拟技术与装置在深海潜水器的试验验证、改进升级等工作中的重要性越来越凸显。2012年,我国自主研制的“蛟龙”号载人潜水器成功完成水下7000m海试,工作压强为70MPa,使我国成为继美国、法国、俄罗斯、日本之后世界上第五个掌握大深度载人深
得利于深度学习的发展与大规模训练数据的积累,最近几年人脸识别技术取得了巨大的成功。其中,传统的二维人脸识别技术通过对人脸的纹理数据进行特征表达,并通过判断特征间的相似度对人脸进行身份确认。人脸姿态、妆容,特别是环境光照对获取到的二维纹理信息有着较大的影响,进而影响二维人脸识别算法的识别性能,也限制了二维人脸识别系统的应用场景。三维人脸识别技术使用人脸的三维深度信息对人脸身份进行鉴别。这使得三维人脸
股骨是人体的主要负重骨之一,也是骨肿瘤最常发生的部位之一。目前临床上使用的股骨肿瘤假体存在生物活性较低、与骨缺损部位解剖形状匹配性不足及应力遮挡等问题,这会导致股骨修复支架的松动甚至失效。因此如何快速设计力学和生物学性能好、与患者解剖形状匹配的个性化股骨修复支架成为股骨重建的关键。本文利用模块化设计方法结合3D打印技术提出了一种个性化的多孔股骨组合式支架设计方法。在股骨组合式支架模块化设计、支架多
航空航天、国防、能源等领域的发展离不开金属设备及构件,监测并保证它们的安全运行至关重要。由于服役过程中存在应力、腐蚀和疲劳的影响,金属表面不可避免的会产生均匀腐蚀、裂纹、坑蚀等缺陷,尤其是在环境恶劣、密闭、不间断工作等条件下使用的诸如油气管道、化工容器等。脉冲电位降(Pulsed Current Potential Drop technique,PCPD)作为一种安全可靠、非侵入式的无损检测手段,
由于兼具金属的力学性能和陶瓷的美学效果,金属基烤瓷修复已经成为国内外牙体、牙列缺损的主要的修复方式之一。Co-Cr合金具有优异的力学性能、耐腐蚀性能和生物相容性,是目前应用最广泛的牙科修复用金属材料。激光选区熔化(Selective Laser Melting,SLM)具有个性化设计和复杂形状快速加工等特点,特别适合用于Co-Cr烤瓷基底的制作。SLM技术可以大幅提高生产效率和产品质量稳定性,降低
纵观人类社会的演进历程,技术创新一直是推动地区乃至国家经济发展的内生动力,是各国抢占国际竞争高地的重要手段。近年来,随着互联网技术迅猛发展、计算机运算能力和运算速度大幅提升以及算法有效性取得极大突破,人工智能在世界范围内取得了突破性进展,并迅速将人类社会送入了智能时代,加速改变着人类社会生产生活的各个方面。基于此,世界各国纷纷围绕人工智能展开了新一轮角逐,美、日、德、法等国先后颁布了一系列扶持人工
现代制造的供应链物流日趋复杂化、网络化,形成供应链物流网络。随着产业升级,绿色制造、再制造、循环经济等概念相继提出,传统正向物流网络日益向正/逆向集成(或闭环)物流网络发展。而在当今世界政治对抗与局部武装冲突加剧,如恐怖袭击、经济制裁、技术封锁等蓄意攻击事件频发,供应链全球化日益受到挑战并朝着区域化发展的背景下,本研究的最终目标是在已有正向物流网络的基础上,设计与构建抗蓄意攻击的正/逆向集成物流网