基于视觉感知的3D视频编码方法研究

来源 :宁波大学 | 被引量 : 0次 | 上传用户:bihaidanxin
下载到本地 , 更方便阅读
声明 : 本文档内容版权归属内容提供方 , 如果您对本文有版权争议 , 可与客服联系进行内容授权或下架
论文部分内容阅读
3D-HEVC能够较好地去除3D视频中的时空域、视点间的冗余,但未能够很好地去除感知冗余,而感知编码的应用能够在保证主观质量不变的前提下,进一步去除感知冗余从而降低编码复杂度或节省编码码率。因此如何构建视觉感知模型以及如何应用到3D视频编码当中,是当前3D视频编码的研究热点。为此,本学位论文基于3D-HEVC编码标准,从视觉感知角度出发,对3D视频的低复杂度编码和率失真优化两个核心技术展开研究。针对深度图编码复杂度较高,本文提出一种基于虚拟视点合成的快速深度图编码方案。面向三维视频系统采用最大可容忍深度失真(Maximum Tolerated Depth Distortions,MTDD)模型,首先根据MTDD值的可容忍性不同,给出应用于不同类型深度范围提前决策算法;然后,检测是否对绘制失真敏感的竖直边缘区域,根据不同的搜索策略进行模式决策;最后,融合这两个算法进一步降低深度视频编码的复杂度。实验结果表明,所提出的算法在保证绘制虚拟视点质量和编码码率基本不变的情况下,降低了49.45%的编码时间。针对立体视频中存在着大量的感知冗余,本文提出了一种基于中心凹的双目恰可察觉编码失真(Foveated Binocular Just-Noticeable Coding Distortion,FBJNCD)模型。首先通过主观实验研究梯度幅值和纹理幅值对立体掩蔽效应的影响;同时考虑到人类视觉特性(Human Visual System,HVS)的视觉敏感度并非恒定不变,当视网膜离心率变大时,像素的视觉阈值也随之变大,因此结合HVS的视网膜中心凹感知特性;最后将FBJNCD并将其应用于多视点高效视频编码(Multi View-High Efficiency Video Coding,MV-HEVC)测试平台中对立体视频进行非对称编码。实验结果表明所提出模型在保持立体视频感知质量的同时,平均能够节省26.04%的编码码率,提高立体视频压缩效率。针对传统的恰可察觉失真(Just-Noticeable Distortion,JND)模型很难应用于立体视频当中且存在高估前景区域的视觉阈值和低估背景区域的视觉阈值的问题,因此本文提出了一种能够应用于立体视频的恰可察觉失真(Stereo Just-Noticeable Distortion,SJND)模型。首先,利用视差信息把传统的JND分为前背景区域,对前景区域赋予较小的阈值,对背景区域赋予较大的阈值。同时考虑到前景区域中人比较关注视觉中心区域和视差较大的区域,因此基于这两个规则提出了一种新的显著图,并给不同显著性区域赋予不同的量化参数(QP)值。实验结果表明所提出方法在保证立体视频质量不变的前提下,平均能够节省19.92%的码率。
其他文献
期刊
在图像编码领域里,高性能以及低复杂度是人们追求的目标之一。许多数学工具都引入了这一领域,其中小波变换已经被证明是一种有效的方法。基于小波变换的EBCOT(Embedded Block Co
期刊
数据业务是近年来移动通信技术发展的热点之一,以其多样性、实用性导致了移动业务的大规模普及.很多新的移动用户是通过短消息、多媒体消息等数据业务开始接触移动网的.而作
期刊
目前的电信网络对于新业务的提供不仅复杂,而且代价巨大。传统电信网络的业务只能在端局交换机中实现,并与交换机紧密绑定在一起,业务提供能力相当有限。智能网基于业务和交
  本文重点对该体系材料的热劣化性能、基质配比、化学反应合成机制、能量传递方式和浓度猝灭机制等进行了实验和理论研究。在此基础上,通过Calphad方法,对Al2O3-BaO-MgO三元
期刊
Ad Hoc网络是由一组无线移动节点组成的不依靠现有固定基础设施就能够迅速展开工作的网络实体,具有无中心、自组织、拓扑结构动态变化和移动终端资源有限等特点。近年来,网络物
基于以太网的新技术和联网设备不断出现,网络化设备成为了以后发展的方向。现今的许多单片机应用系统基本上是基于轻型网络(如RS—232/RS—485、CAN总线等)的应用系统,串口总线