面向视频行人重识别的关键特征提取与增强方法研究

来源 :广东工业大学 | 被引量 : 0次 | 上传用户:wocaonimababa
下载到本地 , 更方便阅读
声明 : 本文档内容版权归属内容提供方 , 如果您对本文有版权争议 , 可与客服联系进行内容授权或下架
论文部分内容阅读
行人重识别是跨监控摄像头大范围追踪行人的关键技术,在智能安防、智能商业等系统建设需求中起着重要作用。目前,由于不同监控设备的属性参数,拍摄视角和拍摄环境影响,行人目标视频在光照、图像分辨率、背景和姿态等方面存在较大差异,使得行人重识别任务在识别准确率方面难以满足实际应用需求。目前行人重识别算法存在着许多亟待解决的实际问题,如监控行人视频中冗余信息比较多、局部关键特征提取不充分。因此,针对上述问题,本文以深度学习方法为基础,提出面向视频行人重识别的关键特征提取和增强方法。研究内容主要包括以下两点。(1)为解决现实场景中由于视频信息冗余所带来的重识别准确率较低的问题,本文提出了一种基于关键信息多帧融合的视频行人重识别算法(Multi-frame fusion Part-based Convolutional Baseline,MFPCB)。首先采用感知哈希算法和三帧差分法交叉筛选待检测单摄像头下行人视频中相似度高和低质量的冗余帧,以提取视频中的关键特征。然后选择改进的Res Net-50网络作为基础特征提取网络进一步对筛选后的关键帧进行高层语义特征提取。最后利用MFPCB网络将不同视图关键信息聚合到单个紧凑的特征描述符中,并用余弦距离度量视频间的相似性。网络受交叉熵损失函数和距离损失函数的指导进行训练和优化。在公开数据集MARS和i LIDS-VID上进行一系列实验,实验结果表明本文提出的MFPCB视频行人重识别算法具有较高的Rank-1和m AP识别率,可以有效地解决视频信息冗余的问题。(2)为解决深度卷积神经网络无法有效提取和增强视频中局部关键特征的问题,本文提出了一种基于渐进式时空注意力的视频行人重识别算法。无需行人身体部位预分割或姿态对齐,时空注意力模块使用多尺度池化自适应地为行人视频中的局部区域分配不同的权重,从而有效提取出人体全局特征和局部关键特征。在实际应用场景中,多尺度池化操作可以使行人局部关键特征尽量不受光照、视角变化和复杂背景的影响。整个网络运用多任务学习思想,结合难样本采样三元组损失函数和交叉熵损失函数进行训练和优化。实验结果表明,渐进式时空注意力算法在MARS和i LIDS-VID两种数据集上的Rank-1识别率分别为84.1%和81.3%,分别高于基于图像的行人重识别基线算法3%左右和5%左右。可达到与现有典型视频行人重识别算法相当甚至更高的识别率,在局部关键特征的提取与增强方面具有优异的表现。本文在视频行人重识别的关键帧提取、局部关键特征提取与增强两个方面进行探索,提高了视频行人重识别的识别准确率,在智能安防方面具有良好的社会意义和商用前景。但是未来还需要进一步研究端对端训练的模型、模型轻量级构建和压缩操作,从而实现在低成本设备上完成实时性识别,提高行人重识别系统的实用性。
其他文献
移动互联网技术的发展、移动多媒体设备的普及以及定位技术的广泛应用让美团、大众点评、Facebook、Yelp等基于位置的社交网络应用逐渐融入了大众的生活。这些应用提供了许多
近年来,基于位置的服务(Location Based Services,LBS)需求呈快速增长的趋势,促进了各类无线定位技术的发展,而室内定位是LBS的重要环节之一。L ED的快速普及为可见光通信(Vi
本文采用相转换的方法制备了一种包裹纳米零价铁(NZVI)的聚醚砜(PES)薄膜并且讨论了该复合材料对于去除水中重金属铬、甲基橙的效果,我们还将聚醚砜进行磺化,制备了包裹纳米零价铁的磺化聚醚砜薄膜,并将该薄膜用于甲基橙的去除研究。对包裹纳米零价铁的聚醚砜薄膜,我们进行了X射线衍射分析、场发射扫描电镜分析以及热重分析。通过SEM-DEX数据分析发现PES薄膜能够将NZVI颗粒均匀分散,并且能够有效地防
随着高速铁路的快速发展,高速列车的运行速度得到显著提高,随之而来的列车运行安全性问题也越来越明显。高速列车悬挂系统动力学参数变化会影响列车的运行安全性,特别是在横风环境下。本文结合计算流体力学和多体系统动力学理论,分析横风环境下列车悬挂系统动力学参数变化对列车运行安全性的影响,以及构建横风下列车悬挂系统参数优化模型,开展高速列车横风下运行安全性的单目标优化、多目标优化以及多工况多目标优化。主要内容
随着科技的发展和网络通讯的广泛应用,图像信息爆炸式的增长使人们对图像处理技术的需求日渐扩大,目标检测也随之成为当前机器视觉领域和计算机领域的研究重点。精确的目标检
随着互联网技术的日益发展,各行各业都纷纷向互联网办公趋势发展。特别是在新的国际环境下,受产业数字化新形势的影响,各大造船运营商都在积极的向互联网转型,调整传统生产运
机械制造自动化领域中,采用先进的三维测量技术对毛坯件尺寸进行快速准确地检测,对于再加工过程中切削加工量的精确确定具有重要的指导意义。目前传统的测量技术大都无法满足
超级电容器又名电化学电容器,是指采用高比表面积的碳材料、导电聚合物或者过渡金属氧化物作为电极材料的新型储能器件,具有高功率密度、长循环寿命、快速充放电速率、低的制造成本等优点,在军用、民用领域均有广泛的应用前景。根据超级电容器电荷储存机理的不同,可将超级电容器分为双电层电容器和法拉第赝电容器两种。通常使用比表面积大,电导率高的的碳材料作为双电层电容器电极材料。碳材料具有稳定且出色的物理和化学性能,
作为税收工作的最后关口和重要环节,税务稽查承担着维护社会经济秩序、打击涉税违法犯罪的重任。党的十八大以来,深化税收征管体制改革成为财税改革的重头戏,而税务稽查体制
2014年10月,党的十八届四中全会提出“完善认罪认罚从宽制度的改革”,随后在全国18个试点地方开展试点工作,这是当前我国刑事司法制度改革的最关键改革之一。认罪认罚从宽制