三维人脸重建的联合空间学习方法研究

来源 :中国科学院大学 | 被引量 : 0次 | 上传用户:yanmu1984
下载到本地 , 更方便阅读
声明 : 本文档内容版权归属内容提供方 , 如果您对本文有版权争议 , 可与客服联系进行内容授权或下架
论文部分内容阅读
三维人脸重建是计算机视觉领域极富挑战性的课题之一,可广泛应用于人脸识别、游戏、虚拟现实和人机交互等领域。三维人脸重建的目的为通过对三维扫描设备获取的人脸点云数据或摄像机获取的二维人脸图像进行处理,重建三维人脸形状。鉴于二维人脸图像应用的普遍性及数据采集的方便性,本文主要研究基于图像的三维人脸重建问题。  基于图像三维人脸重建的一个重要分支是基于回归的方法,它利用统计学习工具从训练样本学习二维和三维人脸分布情况及它们之间的映射关系,从单幅正面图像重建人脸形状。该类方法亟需解决的问题及难点是:1)训练样本的归一化;2)二维和三维人脸分布情况描述及计算;3)二维和三维人脸之间映射关系的计算。对此,本文从高维空间角度出发,对人脸重建问题进行了阐述与分析,并提出了三维人脸的联合空间学习方法。本文研究内容如下:  (1)针对三维人脸训练样本归一化问题,提出了一种基于图像拓扑变形的三维人脸重采样方法。该方法基于图像拓扑变形的思想,对球面坐标系表示的三维人脸图像进行变形,将具有一定差异的人脸变形到相同的形状下;并基于距离最小法建立点之间的对应关系,实现三维人脸重采样。  (2)从高维空间角度阐述了信号稀疏表示和联合空间学习理论,提出了一种基于稀疏约束的联合空间学习方法。该方法旨在利用空间变换计算信号的稀疏表示空间,并建立稀疏表示空间之间的变换关系,实现不同空间信号之间映射关系的计算。从而实现:1)信号原始空间向信号稀疏表示空间的变换;2)不同信号稀疏表示空间之间的变换。  (3)结合二维和三维人脸非线性、非凸的分布特点,以及它们之间映射关系的高度非线性特点,提出了一种渐进式级联回归的人脸重建方法。该方法以基于稀疏约束的联合空间学习方法为基础,通过逐级回归,实现了人脸从粗到细、从低维到高维的映射。具体的,首先通过一种基于联合空间学习的算法建立人脸特征点从二维到三维空间的映射关系,获得初始估计三维特征点;然后利用初始估计特征点与真实值之间的差异度构造形变空间,并通过构造最小化目标函数估计三维特征点的补偿量,使得三维特征点的精度得到有效提升;最后结合一种简单的基于稀疏约束变形的方法最终实现三维人脸重建。实验结果表明,本文方法无论是客观性能指标还是主观视觉效果均能获得更好的重建结果,尤其是细节信息方面更具有一定的优势。
其他文献
目的:研究过氧化氢(hydrogen peroxide,H2O2)对大鼠肾脏髓袢升支粗段(TAL)管周膜10pS氯通道活性的影响及其作用机制。   方法:采用细胞贴附式(cell-attached)和内面向外式
胰2白酶(Trypsin,EC3.4.21.4)是由胰腺分泌的碱性蛋白水解酶,属于丝氨酸蛋白酶(serine proteases)家族。本论文利用基因工程的方法得到重组人阴离子型胰蛋白酶。论文对可重组
与传统光源相比,LED以其体积小、发光效率高、长寿命、绿色无污染等优点,逐渐被人们接受。半导体材料以及技术的不断发展,使得LED在众多领域获得了极大的应用。随着应用范围的不
视觉芯片是集成了CMOS图像传感器和图像处理器的数模混合片上系统芯片。视觉芯片具有处理速度高、低功耗和低成本的特点,因此成为了当前图像传感器和图像处理器领域的研究重点
固定化酶因比游离酶具有较好的热稳定性、酸碱稳定性、重复利用性以及催化产物易分离等优点,已被广泛应用于生物催化,生物传感器等众多领域。固定化酶的载体材料的性质以及结
学位
目的:研究TRAP对豚鼠心室肌细胞KATP通道(ATP敏感性钾通道)的作用,进一步明确ATP敏感性钾通道在保护心肌细胞方面的作用。   方法:急性分离豚鼠心室肌细胞,采用单通道膜片钳记
本文通过对荣华二采区10
期刊
钙钛矿结构锰氧化物一直都是凝聚态物理领域的一个研究热点。电荷、自旋、轨道和晶格自由度之间的强耦合产生了奇特的物理性质,如金属-绝缘体转变、庞磁阻效应、丰富多彩的电
在振动环境中工作的化合物半导体探测器,输出信号中往往会存在一些和振动相关的附加噪声,影响探测器的探测能力。本论文以HgCdTe光导器件和GaN基光伏器件为研究对象,用振动台和
长江是我国第一大河,流域内湖泊众多,尤其在长江中下游地区,湖泊与长江自然连通,形成独特的江湖复合生态系统,孕育了丰富的鱼类资源。但是,拦河筑坝、江湖阻隔等人类活动对长江流域