基于类别特征增强的红外场景语义分割网络

来源 :南京理工大学 | 被引量 : 0次 | 上传用户:huhu39
下载到本地 , 更方便阅读
声明 : 本文档内容版权归属内容提供方 , 如果您对本文有版权争议 , 可与客服联系进行内容授权或下架
论文部分内容阅读
随着智能化时代的到来,人们对成像产品智能化的需求越来越大,例如智能驾驶和无人安防等领域依赖的是车载和机载成像平台的智能化产品。其中,图像分割技术作为实现智能化产品的重要研究方向,通过对场景的语义信息进行分析,分割场景中的目标和背景,帮助智能化产品的落地与发展,得到了广泛的关注与重视。同时,人们对于场景分割的需求不仅仅是在可见光场景,红外夜间场景的需求也非常迫切。然而,由于车载和机载场景的复杂度高,目标多且难以分辨,并且因为红外成像的特性,会造成目标边缘弱,灰度分布不均匀,导致红外车载场景的分割精度难以提升。因此,本文针对车载和机载场景下的红外图像进行语义分割技术上的研究,主要的研究工作如下:红外车载场景复杂,且红外图像细节部分丢失,一般的图像分割算法难以满足任务对精度的需求。本文针对分割目标边缘时容易出现的分类错误问题,设计了基于类别原型回归的场景理解网络:CPRNet。网络提出了类别原型回归损失函数,通过增强类别内的特征相关性,拉近类内距离,从而对图像深度特征进行增强,提升图像细节。同时,在红外车载场景中,图像细节在空间上的分布也尤为关键。因此,CPRNet中还设计了基于类别原型回归的空间和类别上的注意力机制,通过对深度特征进行空间维度和类别特征维度上进行相关性加权,提升特征的表征能力,进一步提升网络在红外车载场景中的分割精度。相比于改进前的基准网络,提升了的4.37%准确率。红外机载平台场景具有目标小,边缘弱等特点,本文针对该类问题,设计了基于超分辨率重建的图像增强模块作为网络的输入部分,对图像中的目标进行尺寸和边缘细节上的优化,并设计了频域损失函数对图像增强模块进行了进一步的优化改进。得到的图像再通过语义分割网络进行迭代训练。同时,本文针对语义分割网络设计了边缘损失函数增强网络对边缘的注意力。最终实验表明,基于图像增强的语义分割网络在红外机载场景下,性能要优于一般的语义分割网络。相比较改进前的算法,准确率提升了4.95%。
其他文献
呼吸是反映身体状况的重要指标之一,基于雷达的呼吸检测无需佩戴任何仪器,应用灵活,成为目前热门的检测手段。现实中进行呼吸检测时,体动的存在会带来巨大的干扰,现有的雷达呼吸检测方法均要求人体处于静坐或静卧等体动轻微的状态,对人体体态具有约束性。本文针对这个问题,研究了运动状态下的体动去除,实现了运动状态下的雷达呼吸检测,本文的主要工作如下:1、介绍了基于连续波雷达的呼吸检测系统,分析了雷达工作原理和回
行人再识别(Person Re-Identification,Re-ID),是在多个无重叠视域的摄像头网络中对行人进行检索匹配,具有重要的学术价值和广阔的应用前景,对建立平安城市和智慧城市具有重要意义。但是,在行人再识别技术的实际应用中,现有行人再识别模型的扩展性不强,即从某一场景中学习到的行人再识别模型扩展到其他场景中应用时性能下降严重。本论文针对不同数据集之间的域差异导致性能下降的问题,围绕行
目标识别技术的迅速发展使得对高分辨雷达图像的需求越来越大,利用电磁计算方法对目标进行仿真可以提供大量的数据源,而针对电大尺寸目标,高频方法由于其计算速度和占用计算机内存方面的优势则成为主要手段。因而基于高频方法的快速成像技术研究对目标识别而言具有重要意义。此外,目标特性的获取也是目标分类、识别的关键技术。在光学区,目标的散射场可视为目标上多个强散射中心的叠加,人们往往通过研究散射中心而获得目标的散
超高飞行器在稀薄大气中高速飞行时,在飞行器四周产生了一层强电离的等离子鞘套,其对飞行器的导航定位,数据通信都产生了影响,严重时甚至会造成信号的中断,也就是“黑障”现象,研究电磁波在等离子鞘套中的传播特性对正确了解以及缓解“黑障”问题具有重要的意义。本文首先利用静态的电磁场对等离子体流场中粒子的影响机理,建立了流体方程与泊松方程耦合的数值模型,通过时域谱元法研究了不同外加电压以及不同的外加磁场下,等
学位
在战场条件下,获得雷达目标属性意味着可判定敌方目标并确定目标威胁程度,从而催生出目标识别技术。鉴于高分辨率宽带雷达体积庞大且制造成本高,并不适用于便携式地面侦察雷达的应用环境,所以便携式地面侦察雷达通常为低分辨雷达。因此,开展低分辨地面侦察雷达自动目标识别算法研究具有重要意义。本文详细介绍雷达自动目标识别技术的特征提取、分类器设计与超参数寻优方法,以及低分辨地面侦察雷达的信号预处理与数据采集过程,
数字图像处理技术是当今社会的研究热点,而边缘检测在数字图像处理中处于关键的一步,在裂纹检测、视频监控等领域中广泛应用。传统软件串行实现图像处理算法效率低、难以满足实时性的要求。而FPGA具有功耗低、并行处理能力强,速度快等优点,可以方便地对摄像头采集的图像进行实时处理,其在图像处理以及高速计算的应用系统中具有很大的研究意义。因此一套集成了图像采集和实时处理的系统具有很大的应用前景。本设计提出了一种
信号波达方向(Direction of Arrival,DOA)估计是阵列信号处理领域的主要研究方向之一,在许多重要的民用和军用领域都有着十分广泛的应用。稀疏阵列突破了半个波长的限制,可以在相同阵元数目的情况下构造出具有更大孔径的天线阵列,拥有更高的自由度和测向精度。本文主要研究稀疏阵列的DOA估计问题,探究将矩阵填充理论应用到空间谱估计中,以提高稀疏阵列的DOA估计性能,主要工作如下:(1)在研
自然界中鸟类在飞行和啄食过程中受到多种冲击载荷的作用,但高频、高加速度的冲击行为却未导致冲击性脑损伤,其出色的抗冲击能力引起了学者的广泛关注。目前,国内外对鸟类头部抗冲击行为的研究主要集中于医学和生物领域,具有一定的局限性。本文采用理论分析、数值仿真和实验相结合的方法,对鸟类头部结构和材料特征进行分析,研究其抗冲击性能,基于仿生学原理,设计了一种新型隔振器,为机械设备优化设计提供理论参考。本文主要
大口径光学元件在天文、能源等前沿技术领域内有着重要的作用,它们的高效加工是这些技术进行的保障,而制约大口径光学元件加工的关键因素就是光学检测。采用微偏振阵列作为移相器的偏振同步移相干涉术因为非接触式、数字化测量、抗振动等优点得到了广泛的应用,但是对于大口径光学平晶检测,会因为其自身重力产生应力双折射,在测量结果中引入偏振像差。本文研究了一种将偏振像差等效波片的模型校正方法,主要研究内容如下:基于偏