【摘 要】
:
双目图像超分辨率重建算法通常使用具有两个不同视角的双目图像来为图像超分辨率重建提供更多的有用信息,以便能够重建出高质量的超分辨率图像。但是,如何准确有效地捕获双目图像中长距离的相互依赖关系是双目图像超分辨率算法研究的重点。故本文分别提出了基于空间和通道注意力机制的双目图像超分辨率网络(Parallax-based Spatial and Channel Attention Stereo Super
论文部分内容阅读
双目图像超分辨率重建算法通常使用具有两个不同视角的双目图像来为图像超分辨率重建提供更多的有用信息,以便能够重建出高质量的超分辨率图像。但是,如何准确有效地捕获双目图像中长距离的相互依赖关系是双目图像超分辨率算法研究的重点。故本文分别提出了基于空间和通道注意力机制的双目图像超分辨率网络(Parallax-based Spatial and Channel Attention Stereo Super-resolution Network,PSCASSRnet)和基于二阶混合域注意力机制的双目图像超分辨率网络(Parallax-based Second-order Mixed Attention Stereo Super-resolution Network,PSMASSRnet),并利用这两个基于深度学习的重建网络来捕获双目图像中长距离的相互依赖关系,同时以此来重建超分辨率图像。PSCASSRnet可以充分利用双目图像中存在的视差信息来重建出高质量的超分辨图像。具体而言,本文提出了一种基于视差的空间和通道注意力模型(Parallax-based Spatial and Channel Attention Module,PSCAM),该模型能够同时考虑图像的空间特征和通道特征,并利用极线约束提取双目图像中最为相似的特征,本文还使用密集连接将多个空洞空间卷积池化金字塔(Atrous Spatial Pyramid Pooling,ASPP)连接起来提出了一种密集ASPP模型,该模型可以利用特征重用来提取更多具有差异性的多尺度特征。PSCAM没有探索中间层固有的特征相关性,密集连接的ASPP不能利用ASPP内不同卷积层之间的局部信息流,这些均会阻碍网络的表示能力。因此,本文进一步提出了一个双目图像超分辨率重建网络PSMASSRnet。具体而言,本文在注意力机制中使用二阶特征统计量来代替一阶特征统计量,提出了一种基于视差的二阶混合域注意力模型(Parallax-based Second-order Mixed Attention Module,PSMAM),该模型能够利用二阶特征统计量来更好地学习双目图像的特征相关性。本文还提出了一种密集交叉ASPP模型,该模型可以充分利用之前层的局部和全局信息来提取多尺度的特征。除此之外,本文还在损失函数中加入了回归损失,该损失不仅可以通过约束低分辨率图像到高分辨率图像映射函数的解空间来使网络更容易找到最好的解决方案,而且还可以解决现实数据中缺少高分辨率真实图像的问题。本文所提出的两个网络PSCASSRnet和PSMASSRnet均在三个基准数据集(KITTI2012、KITTI 2015和Middlebury)上与目前先进的图像超分辨率算法进行了对比实验,并且从定性结果与定量结果等方面验证了它们出色的重建性能。
其他文献
Ti-6Al-4V是最为常用的一种钛合金,因具有密度低、生物相容性好、综合力学性能优异、耐蚀性好等优点而被广泛应用于航空航天、生物医疗及其它工业领域。通常,钛合金采用真空感应熔炼和热机械加工的制备技术路线,存在成本高、材料利用率低、制造周期长等问题。近年来,为了克服传统制备方法的固有缺陷,并满足产品个性化和量身定制的需求,增材制造技术成为重要的制备手段。增材制造技术基于三维设计和逐层打印的加法原理
时间序列预测作为一种根据已有的历史信息对事物的未来走向进行预测的手段,为决策的制定和采取提供了参考的可能,也因此越来越成为了交通、能源、环境、金融、物流等多个行业的研究热点。随着近些年物联网和大数据时代的到来,时间序列的收集和获取变得越来越便利,但同时也暴露了数据质量参差不齐和数据总量愈发庞大的问题,对时间序列预测带来了以下挑战:一是由于随机因素产生的异常数据往往会破坏时间序列表现出的正常规律,二
广阔的海洋是人类的财富宝库,在对海洋的探索和开发中,自主式水下航行器(AUV)不断受到重视。为了省去航行器充电前的打捞环节,提高安全性,扩大航行器巡航范围,航行器水下无线电能传输技术应运而生。无线电能传输技术可以实现非直接接触情况下的电能传输,具有实现航行器水下直接充电的能力。本文主要针对自主式水下航行器无线充电系统的线圈设计、补偿拓扑及控制三个方面,通过理论推导、仿真验证和实验验证等方法进行研究
传统圬工护坡很难满足人们日益增长的美好公路环境需求,植被护坡能够在控制坡面侵蚀的同时减小公路对生态环境的负面影响。客土喷播技术是公路路堑边坡广泛应用的生态护坡技术,受边坡坡度、岩性以及水份赋存条件等影响,客土喷播防护边坡植被的快速、持续恢复面临挑战,同时,高路堑边坡在降雨条件下更容易发生坡面冲刷,存在安全隐患。依托工程实例,通过现场跟踪调查、试验分析、模型建立和模拟等方法,研究客土喷播路堑边坡的植
电网跳闸故障的快速准确识别对于维持电网供电的可靠性起到重要作用,针对当前电网故障识别算法存在故障元件识别算法容错性差、计算速度慢,故障类型辨识算法易受各种噪声影响以及故障原因分析算法缺失等问题,本文设计了一套考虑保信、故障录波以及外部气象告警信息的电网跳闸故障诊断算法以实现电网故障元件的快速、准确识别,并能辨识故障类型及量化分析故障原因。论文主要工作包括如下几个方面:首先,针对传统电网故障元件识别
随着交通量、路面使用年限的增长,沥青路面结构病害逐年加重,对路面使用性能状况进行科学合理的评价和预测,是制定路面养护决策的重要依据。本文考虑路面评价的模糊性和不确定性特点,开展基于融合权重的正态云模型沥青路面使用性能评价方法研究,同时构建基于XGBoost算法的路面使用性能预测模型,探究机器学习在路面使用性能预测中的应用。首先,对广东省普通国省道发展状况进行分析,考虑自然环境、气候、交通量的影响,
当今的移动通信仍在快速变革,窄带物联网(Narrow Band Internet of Things,NBIoT)低功耗、广覆盖的特点让其在众多传统领域产生广阔的应用场景。由于NB-IoT典型的工作信噪比小于0d B且它简化的物理信道等原因,现有的广泛用于OFDM(Orthogonal Frequency Division Multiplexing)系统的信道估计器不能直接适用,因此研究一种在NB
氧离子导体膜是一种在中低温条件下具备高氧离子电导率的致密陶瓷膜,理论上其对氧气的选择性为100%,并且可通过调节膜两侧的电流密度大小调控透氧量大小。然而要在工业上进行应用,氧离子导体膜的透氧性能还需要作进一步的优化。目前主要是通过离子掺杂来增加氧空穴浓度从而优化透氧膜的性能,其中,传统的掺杂手段为金属离子掺杂如碱土元素和稀土元素等,但未对碱土元素掺杂LAMOX型氧离子导体的透氧性能进行系统研究。近
人口老龄化是社会发展的必然产物,随着人们生活水平的提升,老年人的需求逐渐从物质与健康层面转移到了精神娱乐层面,益智玩具作为精神娱乐需求的重要载体,不仅可以延缓老年人的智力衰退,也可缓解其孤独感。而目前国内对于老年人益智玩具需求的重视程度不足,较少有关于老年人益智玩具方面的研究,国内老年人玩具市场尚存在较大的发展空间。由于老年人在生理及心理方面与设计研究人员与存在较大差异,使用传统的研究方法难以挖掘
在宏大历史题材的展陈设计创作中,全局观是必不可少的。以国家红色主题设计的概念界定和要素构架为基础,根据对党史馆的策展理念及展览内容的分析与研究,从宏观的布局到具体的人事物的表达,致广大尽精微,寻找到以"人"在认知过程中为主导和决定的要素,以实现全因素的沉浸式表达为目标的展陈设计思路,提出"具身认知"的设计理念,它包含了对中国共产党历史展览内核的宏观判断并与之一致。因此,通过"具身认知"理念与全因素