基于域距离感知训练的真实世界图像超分辨率算法研究

来源 :华南理工大学 | 被引量 : 0次 | 上传用户:yingchali
下载到本地 , 更方便阅读
声明 : 本文档内容版权归属内容提供方 , 如果您对本文有版权争议 , 可与客服联系进行内容授权或下架
论文部分内容阅读
图像超分辨率算法的目的是从一张低质量的图像重建出一张高质量的图像,造成图像质量下降的原因包括分辨率降低、镜头噪声、运动模糊和图像压缩等。因此,图像超分辨率是一个没有唯一解的未定问题,对于一张给定的低质量图像,有任意张高质量图像与其对应。近年来,得益于卷积神经网络的发展,超分辨率算法在重建图像的精确度和感知质量等方面取得了极佳的重建效果。但是,由于在实际应用场景中,图像的模糊方式更加复杂,传统超分辨率网络训练方式在实际应用场景中面临两大难题:(1)高质量图像和低质量图像之间的退化关系未知且远比双立方插值和双线性插值复杂,这导致了超分辨率网络泛化性能大大下降。(2)对于真实场景中的低质量图像,没有与之内容匹配的的高质量图像,这导致传统的监督训练方式不适用。针对这两大难题,本文提出了两种不同的基于深度学习的算法模型,来提升超分辨率算法在真实世界场景中的重建能力。本文主要贡献如下:(1)基于域距离选择的真实图像超分辨率算法。本章主要解决上述的第一个难题,提出了一种基于Fréchet Inception Distance(FID)的图像数据增强策略和一个新的针对真实应用场景的超分辨率网络——多重通道注意力密集连接网络。本章方法将生成的低分辨率图像Yg与真实世界的低分辨率图像Yr进行FID度量,筛选出针对该退化模式的训练数据{Yg,Xr}。从而对多重通道注意力密集连接网络进行训练,自适应地对密集连接块中的特征通道进行加权,使网络能更好地利用有价值的特征。(2)基于域适应的真实世界非监督超分辨率算法。本章主要解决上述的第二个难题,提出了一个新的域距离加权损失函数和域距离感知非监督训练方法。本章方法通过一个二分类器对生成图像Yg与真实世界图像域Yr进行像素级别的域距离估计,在超分辨率过程中对图像的不同区域的损失加权,从而让超分辨率网络更关注于域距离小的图像块,减轻不良数据对训练的影响。同时,超分辨率网络接收{Yg,Yr}两种不同的输入,并在图像的小波域的高频分量空间中使用非对称损失函数进行训练,进一步减轻了生成数据Yg与真实数据Yr之间的域差异所带来的影响。本文设计了详尽全面的实验,在3个真实世界图像数据集上与当前主流的超分辨率方法进行了对比。实验结果证明,本文提出的方法在客观指标和主观感知质量上均有较大提升,超越了当前主流的超分辨率方法的效果,证明了本文方法的有效性和优越性。
其他文献
波达方向(Direction of Arrival,DOA)估计是阵列信号处理的一个基本问题,水下DOA估计在水下导航、水声定位、海洋开采等领域都有十分广泛的应用。在实际水下环境中,常使用声波进行传播,而声波波速随着环境因素的改变而不断变化。传统DOA估计算法把声速当成常量来计算,这会导致较大的估计误差。而现有水下DOA算法使用均匀线阵,估计精度不够高。本文主要研究基于嵌套阵的声速无关的水下DOA
球笼式万向节是一种特殊的动力传递部件,可在输入轴与输出轴两轴间存在夹角且夹角大小快速变化的场合下稳定地传递转矩。该结构最常用于汽车的驱动轴上,用于解决汽车轮胎在转向与跳动过程时旋转中心轴发生位移与偏转的情况下,动力与运动仍需平稳传递的问题。作为汽车传动系统中的一个重要结构,球笼式万向节的强度对汽车动力传递的可靠性有重大的影响。为了能更好的分析球笼式万向节在极限工况下的破坏原因,对现有球笼式万向节进
随着社会经济的不断发展,交通环境日趋繁重,路面损坏逐渐严重。开展路面使用性能评价及预测研究,准确了解路面使用性能等级状况及变化趋势,可为制定路面养护策略提供依据。本文采用随机森林(RF)、支持向量机(SVM)、BP神经网络(BPNN)三种算法进行路面性能的评价和预测研究,探究机器学习方法在路面使用性能评价和预测中的应用。本文基于广东省公路养护分析CMAP平台,对广东省普通国省道进行调研分析及使用性
局部进展期直肠癌的标准治疗方式为新辅助放化疗结合手术切除。但是新辅助放化疗可能会产生毒副作用。病理活检是临床诊疗的“金标准”,包含大量的肿瘤微环境信息,而医生无法直接从临床诊疗中得到病人新辅助放化疗的疗效。因此,本文结合深度学习方法利用活检数字病理切片预测局部进展期直肠癌新辅助放化疗疗效,辅助医生临床决策。由于数字病理切片的标注难以获得以及大尺寸的问题,本文基于深度卷积网络和数字病理切片分割的小块
近年来,由于定位服务的迅猛发展,室内定位引起了人们的广泛关注。其中,可见光定位(Visible Light Positioning,VLP)是使用发光二极管(Light-emitting Diode,LED)光源作为信号源进行定位的技术,具有无电磁干扰、绿色环保、兼顾照明等优点,在室内定位领域具有很高的研究价值和应用前景。本文在广泛调研可见光通信定位算法的基础上,以VLP中两种常见接收端——光电传
地铁作为一种城市元素在城市交通体系中起着至关重要的作用。广州作为国家中心城市,广州地铁不仅要实现公共交通的基础功能,更应体现东方文化精髓、广州地域文化特色。地铁车站文化特色建筑空间设计研究是城市形象确立、人文价值传承、公众精神追求的迫切需求。因此,研究广州地铁地域文化特色设计建筑空间是非常有实际意义和价值的。本人对广州地铁已开通的各线路进行实地调研,经过对比分析提出广州地铁建筑空间在文化特色设计中
葡萄果实生物活性物质和颜色是衡量其品质和成熟度的重要指标,花青素等酚类物质是其主要呈色物质和生物活性物质,温度和光照等环境因素对花青素积累具有重要影响。本研究以乌鲁木齐和吐鲁番两个葡萄种植区的两个葡萄主栽品种‘红地球’(RG)和‘新郁’(XY)为研究对象,对比不同环境下葡萄果实发育过程(S1、S2、S3、S4和S5五个时期)花青素等植物代谢物的积累,评价环境因子对葡萄果实品质发育的影响规律,探究光
随着5G独立组网技术标准在2018年的冻结与发布,移动通信正式迈入5G时代。2019年开始,中国三大运营商建设起了全球最大规模的5G网络,引领了全球5G建设投资浪潮。然而5G高频段、大带宽等关键技术的应用,决定了5G无线网络设备能耗和基站数量都较4G网络大幅提升,网络运营成本不断增加,在5G商业化的初期,也带来了“高能耗、低收益”的巨大挑战。因此,研究可随用户发展自适应的基站级别的节能策略,对促进
情感不仅反映人当下的生理心理状态,而且在人类的认知、沟通和决策能力扮演了重要的角色,是构成人类社会活动的必备条件。情感识别可以利用计算机去自动识别、理解和反映人类的情感,从而辅助于现实生活中的方方面面,例如人机交互、医疗保健、教育、游戏开发、驾驶安全等。考虑到脑电信号能为情感识别提供强大的客观性和较高的分类精度,以及脑机接口的快速发展,脑电情感识别研究是时代赋予我们的重大课题。经调研,发现现有的脑
泡沫金属是一种兼具结构性和功能性的新型轻质材料,具有重要应用价值。随机无规则多胞结构决定了泡沫金属在各种加载下的变形呈现高度非均匀性,材料的宏观力学行为更加复杂。准确测量泡沫金属材料内部变形场是开展深入力学研究的重要基础。数字体图像相关法(Digital volume correlation,DVC)是一类新兴的非接触式测量方法,借助CT扫描等三维成像技术,能通过图像配准实现材料内部三维变形场的有