基于深度学习的超分辨率重建算法研究

来源 :福州大学 | 被引量 : 0次 | 上传用户:sephinroth
下载到本地 , 更方便阅读
声明 : 本文档内容版权归属内容提供方 , 如果您对本文有版权争议 , 可与客服联系进行内容授权或下架
论文部分内容阅读
随着科技的发展,图像信息作为最重要的信息之一,在生产生活中具有不可替代的意义。图像的分辨率通常用来反映图像的清晰程度,但是在部分条件下,无法获取到分辨率较高的图像,但可以使用超分辨率技术重建出高分辨率的图像。单图像超分辨率的目的是从单个低分辨率图像中重建出与其相对应的高分辨率图像,超分辨率已经广泛用于卫星成像、医学影像处理、安全监控、图像增强和图像压缩等领域。基于深度学习的超分辨率重建是当前研究的热点,同时也取得了很好的重建效果,越好的超分辨率重建效果通常需要使用庞大的网络模型,但是同时也带来了算法复杂度和存储网络模型的存储空间也急剧增加的问题,在诸如嵌入式设备、移动设备这样存在计算、体积、功耗等方面受限的设备,无法有效地使用规模庞大的网络模型。本文研究如何以较小规模的神经网络实现良好的超分辨率效果,以便于在低功耗、低计算力的嵌入式设备或移动设备部署超分辨率模型。本文的主要研究内容如下:(1)本文创新地将知识蒸馏的相关思想应用在超分辨率问题中,通过一个网络浅、参数少的超分辨率学生网络去学习一个网络深、参数多的超分辨率教师网络的知识,在不改变学生网络的参数量和网络结构的前提下,达到提升学生网络的超分辨率重建效果的目的。本文基于轻量级网络Mobile Nets提出超分辨率学生网络模型,使它可以有效地在资源受限的设备中高效运行。通过使用峰值信噪比和结构相似性作为评价指标,比较了多种不同的提取知识的方法,从中选择了效果最优的方法。在低分辨率图像放大3倍时,使用知识蒸馏的学生网络与不使用知识蒸馏的学生网络相比,在四个测试集的峰值信噪比提升量分别为0.53d B、0.37d B、0.24d B和0.45d B,学生网络的运算时间和内存消耗也不会增加。(2)学生网络并不能完全学习到教师网络的知识,因此,学生网络的重建效果与教师网络的重建效果依旧有一定的差距。上述研究关注峰值信噪比和结构相似性作为评价指标,所以使用像素级的损失函数,造成重建的超分辨率图像的纹理细节信息较少。针对这个问题,在上述研究的基础上,对由知识蒸馏方法确定参数的学生网络使用生成对抗网络训练,进一步提升轻量级网络的超分辨率重建效果,使重建的图像更符合人眼的主观感受。实验结果表明,这种方法能够在学生网络上进一步有效提升超分辨率重建的视觉效果。
其他文献
随着我国在公路建设领域的快速发展,大客车以其客运高效性和出行经济性逐渐成为汽车行业中的重要组成部分,其市场需求量也在不断增加。然而,在碰撞交通事故中,大客车自身侧面安全防护空间有限,无法通过较多的吸能结构去缓冲碰撞冲击并有效保障乘员自身安全,其侧面碰撞安全性成为目前客车领域的研究热点。本文首先基于客车乘员损伤侧面碰撞事故统计,以国内2010-2018年重大道路交通事故案例为样本进行分析,总结出营运
声表面波(SAW)器件有着十分广泛的应用,包括量子通信、射频通信中的滤波器、用于检测物理参数和生化物质的微传感器、微流体学和芯片上的传感应用等。对于大多数的声表面波器件应用(微流体除外),持续发展的高精尖市场要求器件不断往高频推进,高频器件有许多不可替代的优势,例如高频可以提高数据传输系统中显著增加的信息量的处理速度,达到量子区域,或者提高传感器的灵敏度。本文实现了一种突破性的技术,该技术利用电子
本文以Eufy Security旗下婴儿摄像机(Baby Monitor)、云台机(Pan Cam)、卡片机(Card Cam)产品设计项目为背景,以产品建立的消费者接触点作为研究基础,探索通过品牌设计策略的制定和实施来解决品牌识别一致性,不同产品系列之间的差异性和一致性以及异代产品之间的差异性和一致性等设计问题。Eufy Security是Anker(安克创新科技有限公司)旗下品牌,主要经营智能
随着汽车工业的快速发展,汽车的NVH性能受到越来越多的重视,因为汽车NVH性能对汽车质量有着很大的影响。人工头噪声采集系统将人耳内部听觉特性考虑在内,且作为汽车行业主要的车内噪声采集工具,但是该设备价格昂贵、操作复杂。研究团队自主搭建了一套便携式噪声采集系统,该系统可以采集车内噪声,但是未将人耳听觉特性考虑在内,还未达到工业使用要求,有进一步研究的价值和潜力。为了提高便携式噪声采集系统的精度,从声
中国是传统农业大国,2019年农作物播种面积达到24.89亿亩,每年会产生大量生物质秸秆废弃物,其消纳问题一直是乡村环境的重大亟待解决难题。目前我国农作物秸秆消纳方式主要有秸秆焚烧、原料化、燃料化、基料化、饲料化、肥料化这六大处理方式。其中最具有消纳潜力的方式是饲料化和燃料化,占比最大的是秸秆露天燃烧和燃料化,但秸秆焚烧会损害周围乡村环境质量,而生物质燃料在燃烧过程中易出现结渣等现象,影响燃料燃烧
随着安卓手机的普及,安卓应用市场提供了海量的安卓应用以满足用户的需求。安卓系统的开放性吸引着大量的开发者从事安卓应用开发,从而促进了安卓生态的高速发展。然而,一些剽窃者对原始应用反编译,通过破解应用内容、替换应用内置广告库等方式对原始应用重打包并将其发布到应用市场来达到盈利目的。这些攻击者们利用一些混淆技术对应用中的源代码或者静态用户界面文件进行混淆处理,以此来躲避一些流行的检测方法的检测。本文针
随着经济的持续繁荣和旅游业的迅猛发展,近年来酒店建筑的数量有了明显的增加,酒店建筑提供的功能也逐渐多样化。在满足酒店类建筑多种需求的同时,巨大的能源消耗引起了人们的重视,其中用于采暖、制冷、生活热水和蒸汽生产的能耗尤其大。为了顺应我国把控能源消费总量,提高能源系统效率等发展方向,从而实现节能环保的目标,就必须优化酒店类建筑的传统冷热供能系统。本文针对酒店类建筑传统的冷热供能系统能源利用不充分,系统
在生物网络中,网络模体被认定是复杂网络的基本组成,并且是反映生物网络协作模式的构成单元。因此对于研究网络模体是揭示生物网络特性的重要分析工具。生物网络可以根据节点的类型分为同构网络和异构网络。其中,共调控网络属于异构网络,相比于蛋白质相互作用等同构网络来说,有着规模大,节点类型和调控机制多的特点。共调控网络包含三种节点类型,分别是mi RNA,转录调控因子和基因(gene)。共调控网络共有五种调控
云存储的数据外包模式可以提供高质量的数据服务,但同时也为数据安全带来隐患。数据加密可以保护云存储中的数据安全和隐私,但也会带来数据检索困难的问题。可搜索加密是在不解密所有数据的前提下,在云存储上对加密过的数据上实现检索,并尽可能保证效率和安全性。但现有的可搜索加密方案仍有不足。一方面许多方案只支持精确检索,当用户输入有拼写错误时无法完成检索,或者方案能实现简单的关键词纠错,但纠错结果准确度低,无法
市场竞争的日益加剧与先进制造技术的逐渐普及,使得企业的生产方式发生了根本性的转变,企业对车间调度问题也有了前所未有的重视。混合流水车间调度问题作为经典流水车间调度问题柔性化的拓展,是制造企业面临最普遍的调度问题。本文以某企业箱体类零件制造车间为研究对象,提出了一种考虑设备布局的混合流水车间调度模型,并在此基础上进行了调度算法的设计,生产车间仿真模型的建立与运行以及车间调度原型系统的开发。主要研究内