基于结构改进生成式对抗网络的图像转换

来源 :上海交通大学 | 被引量 : 0次 | 上传用户:bigjohn6120
下载到本地 , 更方便阅读
声明 : 本文档内容版权归属内容提供方 , 如果您对本文有版权争议 , 可与客服联系进行内容授权或下架
论文部分内容阅读
图像转换算法是指给定一张图像,经过一定数学方法或者计算机处理生成另一种图像的过程,广泛应用在字体迁移,属性迁移和显著性预测等多个方面。本文主要研究图像转换中人脸局部属性迁移和网页显著性预测任务。人脸局部属性迁移是一种特别关注局部信息的图像转换任务,该任务需要在图像局部属性区域进行转换而保持身份信息不变。网页显著性预测是一种格外关注网页边缘信息的图像转换任务,一般网页图像分辨率比较高并且图像中各个区域相互独立,所以以往一步预测网页显著性的研究效果不佳。生成式对抗网络是深度学习领域重要的研究方向之一,可以有效实现图像转换任务。针对人脸局部属性迁移和网页显著性预测的特点,本文设计了两组结构改进的生成式对抗网络,并验证了模型的有效性。本文的具体工作包括:首先,针对人脸局部属性迁移任务中格外关注局部信息的特点,本文改进生成式对抗网络中的判别器部分,提出双判别对抗网络(DDAN)。模型在原始生成式对抗网络的基础上引入局部属性判别,构成全局和局部两组判别器,二者分别提取图像的全局和局部信息来提高模型分布拟合能力。模型还引入身份信息保持网络来保证属性迁移前后图像的身份信息不变。本文在CelebA数据集上验证了双判别对抗网络在局部属性迁移任务上的有效性,五种局部属性迁移后的图像分类准确率相比现有模型有明显提高。其次,针对网页显著性预测中一步预测效果不佳的特点,本文改进生成式对抗网络中的生成器部分,提出双生成对抗网络(DGAN)。模型通过引入粗糙生成器和精细生成器实现由粗糙到精细的网页显著性预测,将传统的一步实现网页显著性预测变为两步预测过程。模型还引入由拉普拉斯算子提取到的网页边缘信息作为先验知识,提高了模型显著性预测效果。本文在网页数据集FIWI上验证了双生成对抗网络在网页显著性预测任务上的有效性,双生成对抗网络的线性相关系数和标准化扫描路径显著性指标相比现有模型有明显提高。
其他文献
小城镇建设作为促进城乡融合,推进新型城镇化,实施乡村振兴的重要支撑点,目前,小城镇与大中城市相比在基础设施方面具有较大的比较劣势,雨水径流在高峰时期短时期内无法排放,
大气气溶胶是大气的重要组成部分,它对大气环境、气候等都有着很大的影响,同时它对人类生活、生产的影响也是不容小觑的。研究大气气溶胶的物理和光学特性,建立大气模式,有助于了解大气气溶胶的气候效应以及大气污染物对人类的危害等问题。因此,研究大气气溶胶的特性很有必要。海洋气溶胶作为大气气溶胶的组成部分,通过多种方式直接或间接的影响地气系统的能量收支以及气候变化。研究海洋气溶胶可以帮助人类进一步地认识海洋的
图像检索是一项富有生命力的研究课题,而细粒度级别的图像检索又是图像检索中具有十分广阔的应用前景和巨大研究价值的子课题,如电商图片搜索,科研动植物图像搜索等。相比于
视频内容分析是人类视觉理解一个重要任务。视频人体行为识别作为视频行为检测、关系推理与内容深度理解的基础研究,一直以来都是计算机视觉领域的研究热点。早期可按照提取
本文基于国内市场高抑价率的背景,通过研究承销商在新股上市时选择可比公司是否会有所倾向以及所选可比公司是否能够真正反映首次公开招募(IPO)公司价值的问题,发现承销商的
我国经济飞速发展,机动车保有量也急剧增加,为生活带来了一系列的交通与环境问题,同时也占用了大量社会资源。相关研究表明,若出行者群体愿意主动减少小汽车的使用,与其他出
玉米-大豆带状套作复合种植模式,增加了土地利用率,提高了作物产量。但受高位作物遮荫的影响,大豆茎秆伸长,易引发倒伏,进而限制了大豆的产量。因此开展耐荫性研究,培育丰产
寻找高活性和高稳定性的析氧反应(OER)电催化剂一直是可持续能源应用的一个关键并具有挑战性的环节。然而,由于OER具有缓慢的反应动力学,要提供实际应用所需的电流密度,需要
超高层建筑在开展结构设计时其首要问题是合理地确定结构风荷载和风致响应。数值模拟一般基于含有经验成分的湍流模型,因此结果并不完全可靠。风洞试验是目前的主要研究方式,
针对现有压电振动俘能器低频效果差、压电振子承受交变拉-压应力、可靠性低以及固有频率不可调节等问题,提出一种双簧片耦合激励的纵振-横摆式压电振动俘能器,利用耦合器中纵