深度卷积神经网络超分重建技术驱动的卫星遥感影像融合研究

来源 :东华理工大学 | 被引量 : 4次 | 上传用户:ytli1981
下载到本地 , 更方便阅读
声明 : 本文档内容版权归属内容提供方 , 如果您对本文有版权争议 , 可与客服联系进行内容授权或下架
论文部分内容阅读
图像超分辨率重建技术被广泛应用于遥感影像处理、医学成像、视频监控、交通违法监控等多个领域,具备较强的应用价值。对于图像超分辨率重建方法研究问题,发展趋势从基于插值、基于重构、基于学习的算法到近几年基于深度学习理论,基于深度学习超分辨率重建如SRCNN、FSRCNN、VDSR、DRCN等算法,在一定程度上能改善超分重建后图像的质量,但还存在一些不足之处,如卷积层数过少,无法充分学习低分辨率图像与高分辨率图像之间的细节特征。同时,传统卫星遥感影像在融合过程中,大多通过简单的插值法将多光谱影像放大到与全色影像相同的尺寸大小进行融合,融合关注的重点是全色波段的空间细节信息和低分辨率多光谱频谱信息的合并。因此,在插值过程中存在没有充分利用低分辨率的空间信息的情况。本文在前人研究的基础上,针对传统卫星遥感影像融合过程中存在信息丢失的问题和图像超分重建方法的不足之处,改进了基于多尺度卷积神经网络的超分辨率重建方法,在保留频谱信息的同时,增强了低分辨率多光谱影像的空间信息。其次,通过施密特正交变换对空间信息增强的多光谱和全色波段影像进行融合,得到一个具备较高空间分辨率、良好频谱的融合结果。最后通过定性定量质量评价指标对本文提出融合模型与四种经典常规融合算法进行对比,本文方法在主客观质量评价中取得了较好效果。本文主要研究内容如下:(1)综述图像超分辨率重建技术,国内外研究学者对超分辨率重建技术的原理、算法、研究意义进行概述,超分辨率重建技术中包括基于插值、基于重建和基于学习的算法,此外,阐述影像预处理步骤,图像融合的几种常用方法,引入图像质量评价指标对超分重建后图像质量进行评价。(2)结合深度学习中的卷积神经网络模型,卷积神经网络(CNN)结构和算法,介绍了一种将卷积神经网络和超分辨率重建技术结合在一起的卷积神经网络超分辨率重建方法(SRCNN)。其次,提出一种改进的多尺度卷积神经网络超分辨率重建算法,多尺度卷积神经网络能够自主学习高分辨率图像与低分辨率图像内在的逻辑特征。采用Set5、Set14、BSD100、Urban100数据集作为实验数据与测试数据,通过与重建效果较好的Bicubic、SRCNN、SelfEx、VDSR、DRCN方法进行定量和定性比较,客观指标选取峰值信噪比(PSNR)和结构相似度(SSIM)。选用缩放尺度因子为(×2、×3和×4)来验证本文改进方法的可靠性与有效性,实验结果表明本文改进方法性能优于传统重建方法。(3)将改进的多尺度卷积神经网络超分辨率重建方法(MSCNN)与GS融合方法结合组建融合模型。首先,通过改进的多尺度卷积神经网络超分辨率算法对多光谱影像进行超分重建,得到分辨率增强的影像。然后,通过施密特正交变换(GS)将空间信息增强的影像与全色影像进行融合得到一个高空间分辨率、高频谱分辨率的融合结果。同时,对比融合实验采用Brovey变换、Gram-Schmidt变换、NNDiffuse Pan Sharpening、PC Spectral锐化等方法,经主客观质量评价方法对融合结果进行对比,实验结果表明本文方法与GS融合组建的模型融合效果优于四种常用的方法。
其他文献
巴菲特说:“公司的股东有权直接从CEO那里听到什么事情发生了”。 Buffett said: “The company’s shareholders have the right to hear directly from the CEO what hap
一无论是从现实的方面看,还是从历史的方面看,对社会历史合理性的认定都不是一个简单与容易的问题。从共时态的维度看,在人们的现实生活中,面对同样的社会事物,不同的个人、
纵观近代中国国情,中国从一个半殖民地半封建的社会发展成为现在的现代化社会,这近百年间社会变迁进程非常快,同时也非常复杂。从鸦片战争开始,中国经历了许多次重大的变革,每次变
<正>《义务教育语文课程标准(2011版)》明确指出:"语文课程是一门学习语言文字运用的综合性、实践性课程。"语文课程主要是学习作者如何运用语言文字来表情达意、叙事状物的
对华亭43000空分冷箱进行了设计,采用液氧内压缩流程,氧气出冷箱压力8.5MPa,采用高压进口钣式换热器两台(CHART),国产低压钣式换热器六台,国产钣式过冷器四台,主冷凝蒸发器采用卧式单
<正> 陶瓷新彩装饰,在外国是日用瓷、陶艺和艺术瓷的主要彩绘,而自从传入我国以后,并没有引起陶瓷艺术家的重视,因此至今新彩佳作不多见。面对着新彩被冷落的困境,我想年青的
在全球生态环境恶化和化石能源逐渐枯竭的双重压力下,对新能源的研究和利用已成为全球各国关注的焦点。风能作为新能源的一部分,除水力发电技术外,风力发电是新能源发电技术中最
汉至西晋时期的墓葬中经常发现一些盛于朱书陶瓶内的物品,按其质地可以分为天然矿物类、金属制品类、植物类、五谷类。本文对已发现的材料进行了初步考察,认为这些物品就是道
文章介绍了一种新型数据中心形式-数据方舱,并且结合数据方舱在哈尔滨试点项目的应用,展示了该数据方舱快速部署的特点和对降低数据中心PUE的显著作用。
改革开放以来,我国经济迅速发展,但是伴随而来的环境污染,生态平衡被破坏等问题也在困扰着我们。经济发展与社会、自然环境的矛盾日益突出,影响了我国经济的持续发展和人们的