基于深度学习的退化水下图像增强方法研究

来源 :上海海洋大学 | 被引量 : 0次 | 上传用户:a361583800
下载到本地 , 更方便阅读
声明 : 本文档内容版权归属内容提供方 , 如果您对本文有版权争议 , 可与客服联系进行内容授权或下架
论文部分内容阅读
近年来,由于陆地上可利用资源储量逐年减少,海洋中的资源将成为人类生存与发展的根本保障。从海洋中采集的水下图像作为信息传送的媒介,它可以直观地反映促进科研进步与人类文明发展的海洋信息。由于复杂的水下环境及水对光的吸收和散射作用,图像采集设备捕获到的水下图像通常出现严重的退化问题。而退化的水下图像很难直接应用于海洋环境监测、海洋文化遗产勘探、海洋场景分析、海洋军事应用、水下机器人的自动巡航、水下目标检测等水下高级视觉任务。在上述背景下,为促进人类更好地开发和利用海洋资源,寻找有效的方法对退化水下图像进行增强具有重要意义。为了提升退化水下图像的视觉感知效果,众多研究人员分别采用传统的图像增强方法和基于深度学习的图像增强方法对退化水下图像进行处理。基于深度学习的水下图像增强方法通常对退化水下图像有较好的增强效果,特别是基于生成对抗网络的水下图像增强模型,在改善图像清晰度、对比度以及颜色偏差方面表现良好,优于传统的增强方法。然而,由于水下环境的多样性,一些基于生成对抗网络的图像增强方法对退化水下图像的质量改善效果仍存在不足之处。为有效改善多样性的水下环境中拍摄的图像视觉质量,本文将利用深度学习中的生成对抗网络设计出两种不同的水下图像增强模型,从而提高退化水下图像的可视质量。本文的研究内容从如下两方面展开:(1)为解决光在水下传播过程中由吸收与散射效应导致的水下图像模糊、对比度低和颜色偏差问题,提出一种基于Inception-Residual和生成对抗网络的水下图像增强方法。首先,将退化水下图像缩放至256×256×3大小,以获得用于训练模型的数据集。接着,将Inception模块、残差思想、编码解码结构和生成对抗网络相结合,构建IRGAN(Generative Adversarial Network with Inception-Residual)模型来增强水下图像。该模型中的Inception-Residual模块将Inception模块与残差学习思想进行融合,克服了深层网络的梯度消失问题,提升了该增强模型的性能。然后,利用全局相似性、内容感知和色彩感知构造多项损失函数,约束生成网络和判别网络的对抗训练。最后,通过训练好的模型对退化水下图像进行处理以获得清晰的水下图像。实验结果表明,与现有增强方法相比,所提方法增强的水下图像在PSNR、UIQM和IE指标上的平均值分别比第二名提升13.6%、4.1%和0.9%。在主观感知和客观评估中,增强后的水下图像在清晰度、对比度增强和颜色校正方面均得到改善。(2)为有效解决特征提取过程中出现的图像细节信息丢失问题,提出一种基于金字塔注意力机制和生成对抗网络的水下图像增强方法。该方法融合了图像的底层细节信息和高层语义信息,并且将生成对抗网络作为其基本架构。生成网络采用编码解码结构并引入特征金字塔注意力模块,多尺度金字塔特征与注意力机制的结合有利于捕获更丰富的高级特征和图像的细节信息,从而进一步提升模型的泛化性能。判别网络采用类似马尔可夫判别器的结构。此外,通过构建包含全局相似性、内容感知和色彩感知的多项损失函数,使增强后的图像与参考图像的结构、内容和色彩保持一致。实验结果表明,与对比方法相比,所提方法增强的水下图像在SSIM、UIQM和OG-IQA指标上的平均值分别比第二名提升1.0%、2.9%和2.6%。在定性和定量对比分析中,所提方法增强后的水下图像在细节信息、清晰度、对比度和色彩校正等方面都有所改善,且处理多样性场景的退化水下图像时泛化性能更好。
其他文献
在应试教育的体制下,学校和家庭教育在意识形态和实际生活中出现了"全面发展"失衡的局面,劳动教育逐渐被淡化。本文通过讲述劳动教育对幼儿身体和心理发展的重要性,对幼儿与社会产生联结的必要性两个方面强调了幼儿园开展劳动课程的时代要求。结合幼儿年龄发展特征,幼儿园可以从日常生活、幼儿园内的生产劳动和与社区结合的服务性劳动三个方面开展劳动课程。家庭中家长应该建立"尊重、合作、平等"的亲子关系,给予幼儿劳动的
作为最基层的市场监管机构,街镇一级的市场监管所是推动基层治理现代化的重要力量。上海市松江区为了更好地发挥市场监管所在基层治理现代化中的作用,通过一系列改革创新举措促进市场监管所的建设发展,特别是明确街镇基层市场监管所的法律地位、优化市场监管所机构布局、创新监管模式等举措,降低了行政监管成本,提升了基层治理效能。下一步应尽快推动《市场监管所条例》的制定和出台,明确基层市场监管所作为区(县)市场监管局
为形成系统完备、科学规范、运行高效的管理体系,增强治理能力,某大型钢铁集团坚持问题导向、极致思维和高目标引领,高质量启动对标世界一流管理提升行动。围绕国务院国资委对标提升重点任务及对标管理提升主题,系统梳理8个关键职能领域、38个管理对标要点,以对标世界一流为牵引,以业务流程管理为主线,以对标提升行动方案和工作清单为载体,统筹有序、多措并举推进,企业价值创造能力、全球竞争能力、管控治理能力和可持续
2012年,教育部颁发《3—6岁儿童学习与发展指南》中提出,要求珍视游戏和生活的独特价值,创设丰富的教育环境,将劳动教育渗透在每个领域的任务要求和教育建议中,引导幼儿走向真善美。2021年7月,"双减"政策的出台,在全面落实"双减"任务的时代背景下,劳动教育升华为社会的焦点,为全面做好幼小衔接工作,幼儿园将劳动教育融入孩子们的一日生活中,通过劳动教育活动,从而促进"五育并举"落地生根,为幼儿园营造
幼儿园开展劳动教育种植活动可以培养幼儿的劳动意识及劳动探究欲望。而在家庭中实施劳动教育种植活动是为了使幼儿的劳动良好习惯更好地延伸,更好地培养幼儿的劳动意识。幼儿园会因种植场地不足的问题,局限幼儿园开展种植活动,而开展家庭种植活动刚好弥补了种植课程的延伸性以及丰富性。为充分利用家庭资源开展家庭种植活动,以"提问-观察-记录-分享"为基本路径,指导学生家长开展家庭种植活动,促使幼儿园劳动教育种植课程
商用航空发动机作为典型的大型复杂装备,其研发周期长、技术难度大、项目管理极其复杂、供应商资源冲突严重,在一定程度上制约了我国商用航空发动机的研制进展。如何实现商用航空发动机的集成研发、研制全流程的有效管控、供应商资源的合理配置,促进研制过程管理的科学化和精细化,是当前商用航空发动机研制的迫切需求。本文从商用航空发动机的协同研制过程中存在的主要问题入手,提出了商用航空发动机协同研制模式,研究了基于M
目的 观察槐杞黄颗粒辅助治疗儿童传染性单核细胞增多症(IM)的临床疗效。方法 选取2017年1月至2020年12月常州市第二人民医院儿科住院治疗的IM患儿100例,采用随机数字表法分为对照组和治疗组,各50例。对照组予更昔洛韦静脉滴注1~2周,治疗组在对照组治疗方法的基础上口服槐杞黄颗粒,2组随访1个月后统计临床疗效。结果 对照组总有效率为96.00%(48/50),治疗组为100.00%(50/
为探索利用深度学习网络模型快速、定性且定量地提取耕地、园地、林地、交通运输用地、建设用地以及水域等土地利用变化信息,实现对耕地“非粮化”和“非农化”的实时监测监管,从而为国家粮食安全问题提供科技支撑。本研究基于D-LinkNet和Deeplab网络模型分别对高分辨率遥感影像进行深度学习,通过相同对象拥有类似的形状和纹理等特征的原理,自动识别不同的学习对象,从而实现面向高分辨率遥感影像的土地利用信息
近年来,气候变暖的加剧在全球引发了一系列经济、社会和环境问题,已经严重威胁着人类的生存和可持续发展。作为世界第二大经济体和第一大碳排放国,虽然我国的国际影响力在不断增强,但是高碳排放也成为国际社会和舆论界关注的焦点。兰西城市群作为我国西部重要的跨省区城市群,是我国西部重要的生态屏障,也是黄河流域上游重要的工业和能源基地,对我国西部生态安全和经济社会发展具有重要的战略意义。当前中国碳排放研究主要集中
为分析亚热带湿润区农业用地对区域气候的影响,以江西省为例,基于2003—2019年的MODIS地表温度数据,将天然林地作为参照,分析了亚热带湿润地区农业用地热环境效应的时空变化特征及其与主要生物物理因子的关系。结果表明:(1)与天然林地相比,农业用地在白天具有明显的增温效应,年均增温幅度达1.9℃;夜间降温效应明显。(2)农业用地热环境效应随季节变化明显,特别是在夜晚,主要表现为农业用地在夏季的夜