基于先验学习的图像去模糊关键技术研究

来源 :南京理工大学 | 被引量 : 0次 | 上传用户:wwvicky
下载到本地 , 更方便阅读
声明 : 本文档内容版权归属内容提供方 , 如果您对本文有版权争议 , 可与客服联系进行内容授权或下架
论文部分内容阅读
随着现代社会的快速发展,特别是智能手机等便携式移动成像设备的普及,图像已经成为人们获取信息、对外交流的重要途径。然而成像过程从来都不是完美的,测量过程中存在不确定性,表现为模糊、噪声和记录图像中的其他退化因素。图像去模糊是从一个模糊观测图像中重构出潜在清晰图像的过程,其是图像处理领域中一个极具挑战性的问题。对潜在图像进行先验建模是图像去模糊的核心问题,尽管很多有效的先验模型已经被提出用于图像去模糊,但仍然不存在一个完美的先验模型能够捕获自然图像丰富的语义信息,因此结合当前技术的发展(特别是深度学习的快速发展)对先验模型进一步探索是十分重要的。本文采取从特殊到一般(即从非盲去模糊到盲去模糊)的研究策略,针对求解过程需要的图像先验信息,从探索合适的基于图像统计特征的先验信息入手,逐步深入到探索基于数据驱动下的深度先验信息,最终针对当前去模糊效果最优的端到端的深度学习方法,探索其网络结构中影响其重构性能的关键部件(我们称之为结构先验信息)。主要工作总结如下:(1)针对图像统计特征的先验,提出了一种基于可提升超拉普拉斯先验的泊松图像去模糊方法。首先基于BSDS数据集分析了广义lp/lq范数的数学特性,并在高频域使用广义lp/lq范数进行反卷积处理以保留强边缘。然后对泊松模糊图像进行基于可提升拉普拉斯先验的反卷积处理,并利用上面估计出的梯度信息来惩罚小梯度(通常是噪声),保留与图像边界相关的大梯度信息。实验结果验证了所提方法能够获得较好的重构性能。(2)结合广义lp/lq范数的数学特性,接着探索其适用于图像盲去模糊问题的有效性,提出了一种基于广义lp/lq范数的自适应图像盲去模糊算法。首先讨论了广义lp/lq范数对自然图像梯度的影响,然后在梯度空间中构建基于lp/lq范数的优化模型来估计模糊核。由于优化模型的复杂性,本文采用交替梯度下降方法对优化模型进行求解,并采用广义交叉验证的方法来进行正则化参数的选择。本文的实验结果表明,所提算法在多个测试集上均能获得较好的重构性能。(3)探讨传统基于能量优化和基于深度学习的图像去模糊方法的关联性,利用深度图像先验(Deep Image Prior,DIP)的优势,提出了一种基于深度对抗网络和局部模糊探测的目标运动场景去模糊方法。针对目标区域与背景区域可分离的模糊场景,使用不同的生成器来替换传统算法中相应的先验项,构建一种基于局部模糊检测的深度去模糊网络模型,该网络模型包含三个生成网络,其分别对潜在清晰图像、模糊核和目标运动场景的权值变量进行建模。实验结果表明,该方法同其他方法相比可以显著的提升重构性能,视觉效果更好。(4)借用在大量自然图像集上训练得到的生成对抗网络模型作为先验信息,提出了一种基于深度GAN先验的自监督图像盲去模糊方法。该方法从两个方面进行研究:首先对潜在图像的退化过程进行建模,对应着传统的去模糊方法中模糊核的估计过程。为此提出了一种Reblur2Deblur网络模型,并在大规模数据集上进行训练。接着,使用松弛策略来实现基于GAN先验的图像重构,即允许预训练的生成器GAN网络和ReblurNet网络实时微调。实验结果表明,在合成数据集和真实数据集上所提模型都能取得较好的重构性能。(5)针对最新的基于端到端的深度去模糊网络模型,探索其结构先验信息,提出了一种基于注意力自适应和可变形卷积模型的动态场景去模糊方法。针对动态场景去模糊问题,我们基于注意力机制和图像的几何变化提出了注意力自适应模块(Attention-adaptive Module,AAM)和可变形卷积模块(Deformable Convolutional Module,DCM)。其中AAM模块通过使用通道注意力和空间注意力机制来提取图像的模糊特征及确定特征的位置。DCM模块被设计用于处理物体的几何变化,对应着学习如何处理由AAM模块提取的更精细的特征。简而言之,就是通过集成AAM模块和DCM模块到现有的去模糊网络模型中,使得集成后的网络模型可以学习如何更加有效的处理图像特征。实验结果验证了所提模块的有效性和普遍适用性。
其他文献
目的:观察十全大补汤辅助肠内营养支持对结直肠癌根治术后患者营养状况及免疫功能的影响。方法:选取80例结直肠癌根治术后患者,随机分为治疗组和对照组各40例。对照组予以肠内营养支持,治疗组在对照组的基础上予以十全大补汤内服。比较2组中医证候积分、营养状况、免疫功能及不良反应。结果:治疗前,2组食少纳差、腹胀腹痛、气短懒言、神疲乏力等中医证候积分比较,差异无统计学意义(P>0.05);治疗后,2组各项证
太阳能是一种最有潜力的可再生能源,因其分布广泛、数量巨大、清洁安全等优点而受到广泛的关注。进入二十一世纪以来,光伏发电技术在我国迅速发展,年装机容量不断提高,光伏组件成本也逐渐降低。同时,随着人们对空调系统能耗问题的日益重视,太阳能技术的发展现状与社会各界对降低建筑能耗的需求促使了光伏空调系统的出现。文章搭建了一套电压为24V的光伏直驱空调实验系统,通过实验探究系统在重庆地区冬夏季的运行工况,并使
“课程游戏化”与“游戏课程化”作为当前学前教育深化发展与幼儿园课程改革推进的代表性理论主张,二者同源、异构,同趣、共建,是幼儿园课程与游戏有机融合、构建以游戏为中心的幼儿园课程的有益尝试与大胆探索。展望未来,可尝试从推进幼儿园教育教学的三重重心转向、优化幼儿园课程体系的三度生长空间、搭建幼儿园内生发展的三维教研体系,切实推进构建以游戏为中心的幼儿园课程与教育生活的实践进程。
张雪门根据我国的实际情况,借鉴国外理论与实践经验,开发幼儿园行为课程,走上了我国幼儿园课程本土化与科学化的探索道路。随着学者对张雪门教育思想研究,行为课程的精神内涵实践价值不断被挖掘。行为课程理论将行动视为是认知的主体因素,挑战了传统的认知观,从而引发我们对幼儿园教育的思考。
会议
现阶段,不同类型的误差因素直接影响着地质实验测试结果的准确性,其中涉及到了相关技术形式的选取和周围自然环境等。伴随着我国科学技术的不断改进和创新,原子吸收被广泛应用到了地质实验测试工作中,相关部门可以借助该种方式来制定健全的技术标准,从而提升地质行业领域的稳定性,促使其良好开展。在本文中,重点阐述了在地质实验测试环节中对于原子吸收的应用情况。
简要介绍了西昌钢钒炼铁总厂化产工序电捕焦油器内部构造特点及工作原理,并对电捕焦油器投产运行以来出现的较为典型的电气故障,进行分析和提出相应的解决方案,保证电捕焦油器安全、稳定的运行,提高电捕焦油器后的煤气质量,同时也降低职工作业安全风险,减少职工劳动强度和安全环保事故的发生。
劳动教育基地建设是高职教育体系培养社会需求人才的核心举措。随着国家全面推进劳动教育,劳动教育深入高职院校课程,劳动教育基地建设运行机制成为各方重要研究课题。在此形势下,高职院校劳动教育基地建设可以遵循以下流程:前期设置资源驱动机制系统,包括政府引领带动机制、企业利益驱动机制、项目遴选合作机制、专业基础建设机制;中期设置沟通交流机制系统,包括信息沟通机制、人才融通机制、情感交流机制、社会交流机制;后
当前,如何改变小学生劳动教育弱化乃至缺位的现状,使其发挥应有的育人功能,是摆在我们面前的重要课题。我们围绕劳动教育,构建学校、家庭、社会"三位一体"的劳动教育大环境,从自我服务、家务劳动、班级劳动和公益活动四个方面培养学生的劳动观念,开展常态化劳动教育活动,形成学生劳动实践评价机制,积极落实立德树人根本任务。
期刊
学位
2021年11月26日,国务院发布《关于修改〈中华人民共和国烟草专卖法实施条例〉的决定》,增加了第六十五条,即“电子烟等新型烟草制品参照本条例卷烟的有关规定执行”,将电子烟正式纳入专卖和国家监管范围。至此,对电子烟的危害以及是否需要监管的诸多讨论,终于形成定论。为了落实这一政策,产业界、学术界、市场监管部门都在积极探索各种途径。本文探讨了电子烟监管体系构建问题,提出了基于网络和密码技术的电子烟监管
期刊