视频帧率上变换算法研究

来源 :上海交通大学 | 被引量 : 4次 | 上传用户:kxsaqq
下载到本地 , 更方便阅读
声明 : 本文档内容版权归属内容提供方 , 如果您对本文有版权争议 , 可与客服联系进行内容授权或下架
论文部分内容阅读
视频帧率上变换(Frame Rate Up-Conversion,FRUC)技术是一种通过在低帧率视频序列相邻帧之间插入若干过渡帧的方式将其转换到一个更高帧率的视频后处理技术。在高清数字视频系统中,该技术能够用于消除低帧率视频所造成的画面抖动和运动模糊等问题,为观看者提供更加自然流畅的视觉体验。而在移动网络等带宽受限的视频点播业务中,该技术则可用于重建编码端为了降低传输码率而丢弃的视频帧,有效的缓解接收端视频播放时的画面跳跃感,在无需更换现有网络设备的前提下极大的提升了视频的观赏质量。随着人们对主观视觉要求的不断提高,以及各多媒体业务之间视频数据交互的日益频繁,FRUC技术已经成为了目前视频后处理领域研究的热点问题之一。其中的运动矢量的准确性、运动补偿插值的质量和闭塞歧义区域处理等问题,是该技术研究的重点和难点。无论对于传统2D视频还是新兴的3D视频应用而言,视频帧率上变换作为一种重要的视频后处理技术,具有着广阔的应用前景。本文将2D视频的帧率上变换问题作为主要研究内容,以基于块的运动补偿类插帧算法为技术路线,对于其中的真实运动估计、运动矢量场后处理、双向运动补偿插值和闭塞歧义区域处理等难点问题进行了深入的分析并提出了有效的解决方案。此外,相对于2D视频,3D视频中新增加了深度信息。本文对于利用该深度信息来提升V+D(Video Plus Depth,V+D)格式3D视频的插帧图像质量的技术进行了初步探索。本文的主要工作和创新概括如下:针对单向块运动矢量估计的问题,本文以贝叶斯理论运动估计模型为指导,提出了一种自适应先验约束的单向块运动估计方法。该方法通过考虑图像的局部特征来动态调整相应的平滑约束强度,从而有效的克服了现有方法的运动矢量场过平滑问题,提高了运动矢量的准确性。针对初始运动矢量场中存在非可靠运动矢量的问题,本文通过将运动矢量的插值失真信息作为新的可靠性特征,提出了一种有效的运动矢量场后处理算法。与现有的同类算法相比,本文所提出的算法对于纹理相似区域的非可靠运动矢量以及成簇出现的非可靠运动矢量都具有更好的检测和纠正能力。针对传统的块级运动矢量场对于物体边界运动的描述精度不足,容易导致补偿插值错误和块效应的问题,本文首先以核回归理论为指导,提出了基于联合三边核的像素级运动矢量插值算法,能够有效的完成由块级单向运动矢量场到像素级双向运动矢量场的转换,提高对边界运动的描述能力。其次,基于所获得的像素级双向运动矢量场,本文设计了一种基于支撑窗的双向运动补偿插值算法,有效的抑制了插值错误的产生。针对闭塞歧义区域无法获得准确的双向运动矢量的问题,本文通过分析闭塞歧义区域产生的原因和相互之间几何关系,并利用运动的时域连续性特征,提出了一种基于多参考帧的闭塞歧义区域检测处理算法。该算法能够有效的完成对待插帧平面内的闭塞歧义区域的检测,并根据检测结果进一步完成了对双向运动矢量选择算法及补偿插值算法的改进。通过分析3D视频的特点,基于2D视频运动补偿插帧技术,针对V+D视频的帧率上变换问题设计了一种方法,利用深度信息约束解决了物体边缘检测和前后景区分等难题,从而有效的改进了运动矢量滤波和补偿插值算法,保证了插值结果中物体结构的完整性和深度信息的准确性。本文对于所提出和改进的算法的性能进行了大量的实验对比。实验结果表明:与现有的同类算法相比,利用本文算法所得到的插值图像不仅具有较好的主观视觉效果,而且在客观的质量评估方面也均优于同类算法。
其他文献
目的提高对中-重度不典型增生喉癌癌前病变的认识,选择恰当的方法治疗中-重度不典型增生喉癌癌前病变。方法选取经病理证实的29例喉中-重度不典型增生癌前病变患者,其中26例
子宫肌瘤是目前困扰我国女性的常见肿瘤疾病,据有关资料显示,现如今每100例女性中便有5例女性出现子宫肌瘤,随着女性年龄的增长,患病率逐渐上升,其病发率可攀升至25%。但此类
2017年,重庆市侨务工作坚持以习近平新时代中国特色社会主义思想为统领,在市委、市政府的坚强领导和国务院侨办的有力指导下,认真贯彻落实《国家侨务工作发展纲要(2016—2020
铜排搭接是配电柜生产中常遇到的问题,简单的主流排和次流排垂直搭接,在一些文件书籍中都涉及到,满搭接也是常规的母排搭接方式。但在实际生产中常遇到在一个主流排上的同一
鲁迅对连环画的发展起到了巨大的推动作用,他的作品多次被改编成连环画。其中,赵延年和张怀江对鲁迅小说《狂人日记》进行连环画创造,在对小说充分理解的基础上,两人在艺术创
几何特征,如顶点位置、法向量、曲率等等,是用来描述几何对象性质常用的几何量。三维模型的几何特征与稀疏或低秩方法结合,可以有效解决数字几何领域中的很多问题,如模型的方
近年来,随着智能移动设备的广泛普及,一大批移动应用也涌现出来,深入到人们生活的方方面面。这些移动应用强大的功能和丰富的体验对设备的处理能力提出了越来越高的要求,进而