基于流形的人脸表情与外观编辑

来源 :北京大学 | 被引量 : 0次 | 上传用户:gx8689326
下载到本地 , 更方便阅读
声明 : 本文档内容版权归属内容提供方 , 如果您对本文有版权争议 , 可与客服联系进行内容授权或下架
论文部分内容阅读
人脸表情和外观编辑是计算机图形学中最为热门的领域之一。在本文中主要研究其中两个挑战性问题。第一,如何从有限的用户约束编辑得到稠密的人脸形状。我们需要对人脸局部区域之间的依赖关系进行建模,从而有效、直观地编辑整体表情。第二,如何从相对少量的模型对人脸外观多种变化,例如姿态、角度引起的不同进行建模。我们需要解决如何从少量的训练数据学习得到姿态和表情的问题。   在三维人脸表情编辑工作中,我们实现了基于层次高斯过程隐变量模型的交互式三维人脸编辑系统。通过层次模型,整合人脸各局部特征的协同运动,生成自然的表情。我们提出了基于径向基函数的逆向映射和动作传播算法,通过局部编辑即可生成整体表情。通过实验,证明了该系统能够高效生成符合用户约束的三维人脸表情。   在视频人脸替换工作中,我们尝试对视频中任意表情和姿态的人脸进行替换。我们提出了流形图来处理这两种属性变换。流形图的节点为各个角度人脸所对应的流形,而边是各姿态节点之间的变换。各节点内部的变换用于处理表情变化。我们使用高斯过程回归来学习得到这两种变换。给定一张正脸照片,通过流形图即能生成对应的表情和姿态,并将其与原始视频融合。我们在FERET和东方人脸数据库上对该系统进行了测试。结果表明,该系统能够生成接近真实值的具有新姿态和表情的人脸。进一步,在实际视频中进行的实验证明了该方法在视频人脸替换和编辑中的有效性。
其他文献
在嘈杂的室内环境中,听者对特定目标语音的加工会受到周围背景噪声和其他说话人语音的干扰。听觉系统如何从接收到的混合声波中有效地识别和理解目标语音至今尚未得到充分的
图片搜索引擎是以图片作为主要检索对象的搜索引擎。由于图片搜索引擎的结果通过直接引用图片的原始地址来展现内容,如果图片变为无效链接,则在结果中无法展示。无效结果通常为
随着信息技术的高速发展,互联网已经完全融入了人们的学习、工作和生活,成为人们获取信息的一个重要途径。互联网上日益丰富的图片资源,使得图片被越来越多地应用于信息的承载和
计算机科学技术的不断发展,使得计算机在科学研究和工程实践领域得到广泛和深入的应用,科学研究和工程实践领域需要借助于并行计算来解决大规模计算问题,并且随着研究工作的深入
在现今信息时代中,因特网的迅猛发展促使了许多网络信息处理技术的产生,其中应用最为广泛的就是协同计算。一般地,在网络协同计算中,各个计算参与方需要提供各自的秘密信息作为输
伴随着丰富的标注资源的建立以及多次国际评测的开展,语义角色标注任务得到了较全面的研究,其中最主流的研究方向是基于句法成分的、使用机器学习方法将任务转化成分类问题来解
应用程序二进制接口规范定义了一套用以编译程序并确保程序正确运行的系统级接口。目前在MIPS、ARM和PowerPC等体系结构上,均有针对不同处理器或不同应用场景的ABI规范。在这
随着图像“字袋模型”(Bag of Visual Words)的迅速发展及其在物体识别、场景分类、图像检索等计算机视觉领域的广泛应用,如何快速有效地将图像特征映射成视觉词语成为提高系
虚拟现实(Virtual Reality)技术是近年来计算机科学的研究热点之一,随着海量数据处理、多用户远程并发访问和协同操作等应用需求的不断扩大,分布式虚拟现实系统(Distributed
随着数据采集技术的迅猛发展和互联网的快速普及,人们接触到的文本信息量呈现出爆炸式增长的趋势。为了有效地管理和利用这些海量文本信息,实现准确地文本信息定位和文本信息