面向低照/雾霾图像增强和复原的深度学习方法研究

来源 :西安理工大学 | 被引量 : 0次 | 上传用户:surtacohen1
下载到本地 , 更方便阅读
声明 : 本文档内容版权归属内容提供方 , 如果您对本文有版权争议 , 可与客服联系进行内容授权或下架
论文部分内容阅读
图像恢复是图像处理和计算机视觉领域重要研究内容。在低照、雾霾等条件下,户外计算机视觉系统所采集图像通常会遭受严重的退化,如低亮度、低对比度、细节丢失等,严重影响其在户外计算机视觉系统中的应用。因此对户外计算机视觉系统在低照、雾霾等条件下采集图像进行增强和复原,具有非常重要的意义。本文聚焦于低照/雾霾图像增强和复原的深度学习方法研究,所开展主要工作及取得成果包括:(1)针对传统低照图像增强方法对噪声敏感及深度学习方法泛化性差等问题,提出一种用于低照图像增强的注意力自适应卷积神经网络。其整体框架由三个子网组成:基于编码器-解码器网络的梯度恢复子网、基于编码器-解码器网络的亮度恢复子网,以及用于亮度和对比度自适应调整的主干网络。为了避免在恢复图像亮度时弱化对比度的增强,在亮度和对比度自适应调整主干网络中,构建了一种具有线性对比度增强能力的新型自适应实例归一化模块,同时通过增加的梯度恢复子网分支保证了增强图像的结构和纹理完整性。实验结果和定量分析表明,该方法相比于现有方法取得了较好的增强效果,并且对于有高光区域的复杂低照场景以及光照不均衡的水下低照场景,该方法也都能取得较好的增强效果。相关工作已投稿于《IEEE Transactions on Image Processing》(审稿中)。(2)针对现有图像去雾方法对存在大片天空区域的雾霾图像或重度雾霾图像失效的问题,提出了一种基于上下文引导生成对抗网络的图像去雾方法。在该方法中,生成器网络采用了一种由特征提取子网、上下文提取子网和融合子网组成的新型编解码网络。其中,特征提取子网为一个用于提取雾霾图像特征的编码器;上下文提取子网是一个用于提取编码器深层特征并生成粗去雾图像的多尺度并行金字塔解码器;融合子网是一个融合特征提取子网特征和上下文提取子网特征并进行进一步复原的解码器。为了获得更好的去雾效果,上下文提取子网解码过程中获得的多尺度信息作为导引信息被用于优化融合子网的学习过程。为了保证提出的网络在不同的雾度情况下都能有效工作,两个解码器采用了不同的损失函数。实验结果表明,与现有的方法相比,该方法具有较好的去雾性能。相关工作已在《IET Image Processing》正式发表(CGGAN:A Context Guided Generative Adversarial Network For Single Image Dehazing,IET Image Processing,14(15):3982-3988,2021.)。(3)针对夜间雾霾图像清晰化复原问题,提出一种基于注意力融合的生成对抗网络。该网络框架由一个基于卷积的低照图像增强网络、一个基于卷积的图像去雾网络、一个基于多头输入及注意力融合的生成网络,和一个基于卷积的判别网络组成。其方法思路是:首先预训练低照图像增强网络和图像去雾网络,然后将预训练的低照增强网络及预训练的图像去雾网络的输出图像与待处理的夜间雾霾图像一起作为输入图像输入到生成器中,并采用注意力融合和生成对抗的方式对夜间雾霾图像做进一步的增强处理。实验结果表明,本文方法成功的将低照图像增强方法和图像去雾方法加入到夜间雾霾图像的复原任务中,并且进一步提高了复原结果的质量。相关工作已经完成撰写。
其他文献
舌诊是中医诊断中极其重要的一部分,人体的健康状况能够通过舌诊进行初步的判定,传统舌诊主要通过医师肉眼观察舌象,存在对医生的主观依赖性较强的缺点,所以进行舌诊的现代化研究是舌诊的必然发展趋势。本文将舌体分割与深度学习技术相结合,实现舌体自动分割,构建基于特征交叉的多任务学习网络,并应用在舌象分类过程中。主要研究内容如下:(1)对于目前缺乏已标注舌象标签的开源数据集的问题,构建一批高质量的舌象数据集共
人机交互一直被认为是一个活跃的研究领域,同时动态手势是人与人之间交流的一种自然形式,因此最适合应用于人机交互。动态手势存在着较高的自由度、外观差异性和时间维度差异性等问题,因此对动态手势进行识别具有一定的挑战性。传统的识别方法存在识别效果差、设备要求高的问题,所以课题研究基于深度学习的动态手势识别方法。通过对现有基于深度学习的动态手势识别方法的研究与分析,发现了该课题方向存在一些问题。首先,在深度
[db:内容简介]
数字图像盲取证是近年来多媒体安全领域一个重要的研究方向。传统的图像盲取证技术通常利用人工提取伪造痕迹的统计特征来检测和定位图像的伪造区域。然而,随着图像处理软件功能越来越强大,伪造图像的操作越来越复杂和隐蔽,难以察觉的痕迹特征往往会被各种后处理操作破坏,给取证工作带来极大困难和严重问题。随着人工智能技术的发展,利用机器学习进行图像盲取证研究成为一种趋势,然而现有方法存在着检测视野单一、检测结果不稳
[db:内容简介]
[db:内容简介]
科学研究和实际应用中的许多问题可以转化为优化问题,而这些优化问题有一部分是多模态的,即在求解区域内同时具有多个全局最优解点.如何有效的一次性求出全部最优解点一直是多模态优化领域研究的热点问题。本文以多模态优化问题为主要研究对象,基于差分进化算法及小生境思想对多模态优化问题进行了深入地分析和研究,提出了两个求解多模态优化问题和一个求解约束多模态优化问题的有效算法.主要研究工作有以下几个方面.(1)针
许多科学研究和工程实践中的优化问题涉及计算代价昂贵的仿真,如何有效地解决这类高代价的优化问题仍然是一个巨大的挑战。近年来,基于代理模型的演化算法得到了广泛的研究,被认为具有解决此类优化问题的潜力。针对传统的基于代理模型的演化算法在求解高代价优化问题时代理模型的可靠性较差、演化算法的求解效率较低以及离线数据驱动的演化算法求解精度较差等问题,本文提出三种基于代理模型的粒子群优化算法,主要研究内容如下:
群智能算法作为优化技术的一种新手段,具有求解速度快,不受实际问题维数与连续性限制等优点,因此对群智能算法的研究,深受国内外众多学者的青睐。猴群算法是模仿猴子爬山过程的新型群智能算法,更新过程操作简易,适应于求解高维数的优化问题。为了进一步提升猴群算法的优化性能,本论文给出了对其改进的两种方案,并且将其应用于求解背包问题。1.提出了基于Levy飞行的广义反向猴群算法,并利用所提出的算法求解折扣{0-
哈里斯鹰优化算法(HHO)是模拟鹰群捕食和追捕行为的一种群智能算法,存在着计算精度不高、易陷入局部最优和难以平衡探索与开发等不足。本文提出了两种改进的HHO算法,并将其应用于工程约束优化、数据聚类中;建立了两种基于改进HHO的灰色预测模型,用于电力预测和新型冠状病毒肺炎累计人数预测问题中,拓展了 HHO算法的应用领域。具体研究内容如下:(1)提出了随机无迹Sigma点变异的哈里斯鹰优化算法(IHH