基于语义分割的图像超分辨率算法研究

来源 :武汉大学 | 被引量 : 0次 | 上传用户:xsb
下载到本地 , 更方便阅读
声明 : 本文档内容版权归属内容提供方 , 如果您对本文有版权争议 , 可与客服联系进行内容授权或下架
论文部分内容阅读
在许多数字图像的应用领域,高分辨率图像往往是人们所期望得到的。尽管图像传感器已被广泛使用来捕获数字图像,但是随着分辨率要求的逐渐提高,当前的电子元件无论是在价格还是在功能上都渐渐不能满足未来的需要。所以,探索一种能提升数字图像分辨率的方法是十分必要的。图像超分辨率重建正是一种能增强数字图像分辨率的方法,其目的是要从一幅低分辨率图像中重建或恢复出其对应的高分辨率图像,由于多个不同的高分辨率图像经过降采样而生成的低分辨率图像可能相同,图像超分辨率重建问题本质上是一个典型的一对多的不适定问题。这项工作由于其价值和难度在计算机视觉和图像处理领域受到了的广泛关注并且有一系列的重要应用。一直以来,计算机视觉所研究的问题被分为高低两个层次。高层次的问题偏向于对图像的理解,其中的典型包括了图像识别、语义分割、目标检测等,而低层级的问题偏向于对图像的处理,其中的典型包括了图像去噪、图像去模糊、图像修补、超分辨率重建以及压缩图像恢复等。尽管近年来,图像超分辨率重建凭借深度神经网络取得了突破性的进展,但是图像超分辨率重建依然是被视作为一个计算机视觉的低层级问题,其弊端在于忽视了某些高层级信息,而这些信息能作为处理低层级图像问题的补充或者约束。本文针对以上的问题,将图像超分辨率重建这一计算机视觉的低层级问题与作为高层级问题的图像语义分割结合起来,提出了一个基于语义分割的图像超分辨率重建框架,此框架由语义分割网络和级联重建网络串联而成,语义分割网络提取待重建图片的语义特征图和语义布局图,级联重建网络则利用语义布局图和语义特征图进行超分辨率重建。在此基础上,本文通过研究并调整感知损失中的损失权重,使级联重建网络在重建出的结果上更具有视觉说服力和真实感。本文通过实验探索了语义分割网络对级联重建网络产生的影响以及损失函数对超分辨率重建结果的影响,并将超分辨率重建结果与数种对比算法的重建结果进行了比较。经过实验测试后,本文的方法在维持了PSNR等客观指标不变的情况下,在平均主观意见得分这一指标上比超分辨率生成对抗网络平均高出0.16,证实了对于大的缩放因子,使用本文的方法重建出的结果比对比算法的重建结果更具有视觉说服力和真实感。
其他文献
在真核生物转录中,染色质可以通过组蛋白修饰(磷酸化、乙酰化、甲基化以及泛素化等)来调控相关的生物学过程的进行。真核生物染色质修饰复合体催化核小体组蛋白末端的不同的
荧光光谱技术具有超高的灵敏度,在物质的定性、定量测量,医疗诊断,生物成像等许多领域有广泛的应用。表面增强荧光(也称金属增强荧光)效应是,利用金属纳米衬底在入射光激发下
氧化锆陶瓷等工程陶瓷以其优越的物理化学性能,在航天航空、国防医疗和机械加工等领域得到日益广泛的应用。采用超硬精细磨料进行精密超精密磨削加工是目前陶瓷材料最主要的加工手段。但由于材料本身的难加工硬脆特性,氧化锆陶瓷在磨削加工中极易引入裂纹、残余应力等亚表面损伤,造成陶瓷零部件的力学性能和服役寿命的下降。因此,深入研究工程陶瓷在磨削加工过程中的材料去除行为及裂纹成核扩展机制等基础行为是优化表面质量和提
近30余年中国经济快速增长,中国的GDP自改革开放以来增加80多倍。但是伴随着经济增长,大量的能源消耗与相关污染排放随之增加。工业作为中国经济发展的引擎,同时也是能源消耗
通过降低高锰钢中的碳锰含量可以得到一种处介稳态的奥氏体中锰钢。奥氏体中锰钢在受到载荷冲击时可以发生马氏体相变,所以中锰钢比高锰钢在中小冲击磨损的环境中具有更加优
丹参(Salvia miltiorrhizaBunge),唇形科多年生药用植物,其根部是我国传统大宗药材,在治疗心脑血管疾病、组织损伤、血脂升高等方面具有很好的疗效,被誉为“药用模式植物”。
针对高等学校资源优化配置的风险问题,在收集72所高校五年投入产出绩效的基础上,依据实际绩效与平均绩效的偏离度、实际绩效与最大绩效的偏离度以及两种偏离度出现的可能性作
目的在腹腔镜下肾部分切除术中,与阻断肾动脉主干相比,分支肾动脉阻断,可以带来较轻的缺血性损伤,并且术后肾功能恢复较好。然而,它的手术指征仍不清楚。同时,虽然针对肾脏肿
近年来,挖掘与分析社会网络中的社区结构逐渐受到各个领域的重视。社会网络中,社区结构是其最普遍和最重要的拓扑结构之一。因此,如何在社会网络中发现社区结构具有重要意义
东北、西北、华北部分地区以及西南等高寒地带,占我国国土面积的近30%。上述地区的混凝土建筑物会在循环冻融作用下,出现不同程度的损伤与破坏。而地震作用作为另一个影响建筑物安全性与可靠性的重要因素,直接威胁我国的基础建设及人民的生命财产安全。在冬季低温环境下,混凝土内部的水分处于冰冻状态,孔隙冰晶的存在改变了混凝土材料内部的应力分布状态,也必然会影响到混凝土材料的宏观力学性能及损伤破坏机理。本文在国家