基于视觉显著性的多传感器信息融合技术研究

来源 :南京理工大学 | 被引量 : 0次 | 上传用户:fxily
下载到本地 , 更方便阅读
声明 : 本文档内容版权归属内容提供方 , 如果您对本文有版权争议 , 可与客服联系进行内容授权或下架
论文部分内容阅读
随着光学成像技术和信息处理技术的不断发展,单一传感器对场景信息的重现已无法满足复杂场景下对光学目标的探测需求,技术人员开始结合多种类型的传感器,目前多传感器信息融合技术已被广泛应用在军事、安防、医学等多个领域中。多源图像融合是多传感器信息融合的典型应用之一,该技术通过互补性强的、不同成像类型的传感器来获取同一场景下的图像,并对这些图像进行融合处理。视觉显著性表示某些目标在某一特定场景中能够吸引观察者注意的能力,将该特性引入图像融合领域可以更为精准地提取目标信息。现阶段的部分算法在处理多源图像信息时无法较好地综合不同图像之间的优势信息,因此对多传感器信息融合技术开展深入研究显得尤为必要。本文针对基于视觉显著性的多传感器信息融合技术开展研究,主要聚焦于红外图像与可见光图像的多源图像融合,具体工作如下:为了研究如何改进多传感器信息融合技术,从图像融合的层次、像素级图像融合基本方法、图像预处理等方面研究了红外与可见光双波段图像融合的基本理论,从视觉显著性概述、常用视觉特征、视觉显著性模型等方面研究了视觉显著性的基本理论,从而将视觉显著性应用于图像融合中以综合双波段图像的优势信息,更利于后续的目标探测等处理,并研究了主观、客观的图像质量评估方法,将其作为多传感器信息融合算法的重要评估参考。针对红外图像细节模糊而可见光图像难以凸显热源目标的问题,设计了一种基于视觉显著性和引导滤波的融合算法。利用非局部均值滤波进行图像的双尺度分解,利用基于双边滤波的改进频率调谐算法进行视觉显著图的检测,对红外源图像进行迭代处理以消除伪显著目标,利用引导滤波优化后的视觉显著图结合匹配度进行低频信息融合、结合拉普拉斯能量进行高频信息融合。此算法较好地改善了目前图像融合中会丢失可见光图像细节信息的问题,并更好地凸显出红外图像的显著目标。针对多源图像融合算法通常仅能处理一种多源图像的问题,设计了一种基于视觉显著性和非下采样轮廓波变换(NSCT)的融合算法。利用NSCT对源图像进行多尺度分解,利用改进的视觉显著性算法分别提取源图像中的显著性图,图像低频部分利用显著性图之间的匹配度进行融合,高频部分通过比较8-邻域的拉普拉斯能量进行融合。此算法不仅在红外与可见光图像融合中表现良好,同时在多聚焦图像的融合中也具有优越性。
其他文献
随着机器视觉的快速发展,视频图像运动目标检测技术已成为该领域的研究重点,近年来在视频监控等背景固定的场景中检测运动目标已经取得非常大的成就,但在一些背景运动目标也运动的复杂场景中目标检测效果还不理想,如像鸟类、鱼类、昆虫、蛇类等仿生弹药在对运动目标进行检测过程中受到自身运动的影响,背景运动信息为干扰项,增加了目标检测的难度。仿生弹药的特点是体积小,嵌入式图像实时处理系统要求较高,需要合适的算法与低
图像引导放射治疗技术是治疗肺癌的一种重要手段。在图像引导放疗过程中,呼吸运动与心脏搏动的干扰,是导致图像伪影的重要因素,准确的肺组织运动估计可以减少呼吸运动带来的伪影,提高放射治疗的准确性。图像配准是肺运动估计的关键技术,针对点集匹配中提取特征不显著、解剖结构不准确影响配准精度和配准速度较低的问题,本文研究了特征提取算法和肺CT图像三维点集配准算法,具体研究内容如下:(1)针对肺气管分叉点为显著解
随着制造业的快速发展,在熔焊与增材制造领域,传统的人工肉眼判断焊缝质量已经无法满足工业化大规模生产的需求。在智能化焊接方面,随着焊接方式、条件的复杂多变,传统的焊缝跟踪图像处理方案已经不具备普适性。本文针对熔焊增材成形质量中的粗糙度检测进行研究,实现了在线焊接的焊缝粗糙度准确分类,同时将深度学习方法运用到工业焊接智能化领域,实现了焊缝特征的准确提取。本文的主要研究工作如下:(1)搭建了基于线激光的
目前,人员动作检测已经成为了医疗健康、安防以及智能家居领域的重点研究方向,吸引了众多研究者的兴趣。传统的基于传感器和基于计算机视觉的动作检测技术面临着设备昂贵、部署困难和涉及隐私等问题。随着Wi-Fi网络的普及,很多研究者将目光放在了基于Wi-Fi信号的动作检测上。研究者首先利用接收信号强度(Received Signal Strength Indicator,RSSI)来检测动作,但是这种方法的
随着科学技术的发展,电子稳像作为一种方便快捷的稳像方法得到广泛应用。摄像设备受到环境因素的影响,会发生抖动,引起拍摄视频或图像的不稳定、模糊。这不仅严重影响人们从视频图像中获取对自己有用的信息,而且对视频图像的后续处理及利用造成很大不便。电子稳像直接对获取的视频图像进行处理,来消除抖动。本文针对红外视频中的旋转和平移抖动展开研究,提出一种基于陀螺仪和特征点匹配的综合性方法。本文对稳像的基础理论进行
鬼成像(GI),又称关联成像,是一种利用光场强度相关性成像的新型成像方法。相比传统成像技术,鬼成像具有抗散射、抗大气湍流等优势。近年来,也出现了基于鬼成像的三维成像技术。当然,鬼成像技术也存在一些局限,最明显的是该技术的成像时间较长,主要包括前期数据采集和后期算法处理的时间。同时,获得图像的分辨率越高,系统所需的数据量就越大,采样及重建时间就越长。针对系统分辨率与成像时间之间的矛盾,本文基于自适应
近年来,随着物联网信息产业浪潮的推进,带动了作为其关键技术的射频识别(RFID)技术在行业内的发展。RFID技术主要通过射频信号实现非接触信息传递,达到自动识别物体的目的,如今,它在物流、库存管理、交通等领域应用广泛。目前,传统酒店内对洗涤前后的布草采用人工清点的方式存在效率低、耗时、易出错等问题,针对以上问题,本文设计了一款面向酒店布草管理的手持式超高频段RFID读写器。本文首先介绍了本课题研究
低照度CMOS和电子轰击CMOS(EBCMOS)是当前数字微光夜视技术发展的两个热门方向,背照式CMOS图像传感器是实现低照度CMOS和EBCMOS的重要技术途径。本文基于背照式CMOS图像传感器开展了低照度CMOS成像系统和EBCMOS成像系统的研制工作,并且设计和实现了分别适用于低照度CMOS成像和EBCMOS成像的图像处理算法。本文首先对微光夜视技术发展概况进行了简要介绍。接着针对具体需求设
随着科技的发展,工业制造领域的智能化已越来越高,例如汽车制造和维修领域。其中,空间三维信息的提供起到了关键作用,本文将以此作为出发点进行三维重建技术应用方案的研究。在较为成熟的激光三角法技术的基础上,本课题将提出基于激光三角测距法的三维重建系统。通过对此系统的设计与研究来完成可以测量大体积物体的任务,提供可靠性高、较为准确的数据信息,同时减少环境光对三维重建效果的影响,最终完成对被测物体的轮廓扫描
本文针对铝合金构件自动焊接接缝跟踪存在的镜面反射、弧光干扰、飞溅等难题,开展铝合金焊接接缝自动跟踪系统设计、接缝坡口视觉图像质量影响因素分析及预处理、偏差提取与在线跟踪调控、跟踪系统集成及试验验证等4项技术研究,突破铝合金焊接弧光和镜面反射干扰消除技术、坡口图像特征点提取、铝合金焊接变形对跟踪精度的影响、偏差提取算法设计等4项关键难点,研制了激光接缝跟踪焊接系统,开发了激光接缝跟踪算法及调控软件,