深度学习及深度强化学习在视频目标跟踪中的应用研究

来源 :西安理工大学 | 被引量 : 0次 | 上传用户:zmy_java
下载到本地 , 更方便阅读
声明 : 本文档内容版权归属内容提供方 , 如果您对本文有版权争议 , 可与客服联系进行内容授权或下架
论文部分内容阅读
在视频目标跟踪技术中,精度和速度是衡量复杂环境下跟踪算法性能的两个重要指标。近年来,相比于传统目标跟踪算法,深度学习模型因其强大的特征提取能力对跟踪精度的提升做出了突破性的贡献,但其跟踪速度较慢。最近,有学者将深度强化学习应用到视频目标跟踪技术中,其在速度方面相比于深度学习目标跟踪算法得到了改善,但精度略差于深度学习目标跟踪算法。跟踪精度和跟踪速度相互制约的问题是现有的深度学习及深度强化学习视频目标跟踪算法面临的主要挑战。基于此,本文对深度学习以及深度强化学习在视频目标跟踪中的应用进行了比较性研究,主要工作如下:(1)系统全面的综述了深度学习及深度强化学习在视频目标跟踪技术中的研究现状并指出了各类方法的优缺点。首先,针对现有的依赖于离线训练的深度学习目标跟踪算法在在线跟踪过程中精度和速度相互制约的问题,按照不同的解决思路,将其分为有在线微调和无在线微调的深度学习跟踪两大类,并分析了各类方法的优缺点。其次,针对现有的深度强化学习目标跟踪算法,按照强化学习的不同作用,将其分为以强化学习决策目标位置的跟踪和以强化学习预测目标位置的跟踪两大类,并对其进行了总结分析。(2)针对利用非跟踪数据集离线训练的深度学习跟踪器在复杂环境下跟踪精度不足的问题,研究并实现了直接利用跟踪数据集离线训练卷积神经网络的视频目标跟踪。首先,构建多分支卷积神经网络,其包括通用特征层和特定特征层。其次,利用多域学习的思想对网络进行离线训练,主要目的是利用通用特征层从所有训练视频序列中提取目标的通用特征表达。最后,将提取到的通用目标特征表达用于目标的在线跟踪。实验将基于卷积神经网络的视频目标跟踪算法(MBCNN)与4种主流的跟踪算法(DLT、TLD、Struck、CXT)进行对比评估。在OTB50数据集上基于整体性能和基于属性性能的定量实验结果以及在4个存在于真实场景的视频序列上的定性实验结果表明,利用跟踪数据集进行离线训练的深度学习视频目标跟踪算法在复杂环境下具有更高的跟踪精度。(3)针对视频目标跟踪技术中跟踪速度和跟踪精度相互制约的问题,研究并实现了基于深度强化学习的视频目标跟踪。首先,分别利用有监督学习和强化学习训练卷积神经网络,使网络实现从给定状态到动作的映射。然后,在在线跟踪过程中,预训练之后的卷积神经网络根据输入状态可以预测出合适的动作来移动代表目标状态的矩形框的位置,当预测出停止动作时,此时的矩形框位置即为当前帧的跟踪结果。实验将基于深度强化学习的视频目标跟踪算法(ADCNN)与4种主流的跟踪算法(SCM、TLD、Struck、CXT)进行对比评估。在OTB50数据集上基于整体性能和基于属性性能的定量实验结果表明,深度强化学习视频目标跟踪算法在跟踪速度和跟踪精度之间可以实现较好的平衡。与此同时,在5个同时具有多种挑战性属性的视频序列上的定性实验结果表明,深度强化学习视频目标跟踪算法可以在大多数挑战性属性下实现鲁棒跟踪。(4)基于属性的跟踪算法适用性分析。针对目标跟踪中存在的11种挑战性属性,考虑到不同算法在某些属性下的跟踪精度并无显著性差异,但其跟踪速度却具有显著差异,以研究的深度学习跟踪算法MBCNN和深度强化学习跟踪算法ADCNN为对象,进行了基于属性的跟踪算法适用性分析。首先,通过实验比较分析了在精度和速度具有不同需求的实际场合下,MBCNN有无在线微调时基于11种属性的适用性。其次,通过实验比较分析了在精度和速度具有不同需求的实际场合下,MBCNN和ADCNN基于11种属性的适用性。以此为用户根据自身对精度与速度的不同需求,在具有不同属性的序列上选择合理的跟踪算法提供了理论基础。
其他文献
黄瓜(Cucumis sativus L.)是世界十大重要蔬菜作物之一,在世界各地广泛种植。然而,由于黄瓜的遗传基础狭窄,仅采用常规育种手段选育新品种不仅周期长、费工费时,而且效率很低
区域人口健康信息化建设是十二五期间医改的重要组成。本文对全国东、中、西部12个地区的省(市)级区域人口健康信息化建设情况进行问卷调查。对投入情况、省(市)级平台、公共
利用近32年的人口统计资料,利用汉森模型,对武汉市的人口空间变动进程分三个时段进行了研究。研究表明三个时段内武汉市的人口空间变动存在着显著差别,剖析了武汉市近32年来
<正>2009年7月18日,威海华东数控机床研究院成立大会隆重召开,来自全国各地的行业专家学者周亲之院士、盛伯浩教授、丁振乾教授等参加会议,工业报、机电商报、《世界制造技术
期刊
青岛港老港区曾是青岛市繁荣的港口区,近年来随着城市产业结构的调整和港口发展战略的西移,老港区的货物运输功能需求逐渐减弱。为了复兴这片宝贵的区域,青岛市在顺应国际化发展
<正>农村经济的发展离不开金融的支撑,然而在我国广大农村地区,正规金融组织存在严重的不足,这为非正规金融的发展创造了广阔的空间。非正规金融在农村的发展优势信息成本优
目的:对吸毒人员进行艾滋病防治监控是阻止艾滋病在人群中蔓延的一个措施,也是防治艾滋病工作的一个重要组成部分。本研究在河北省强制戒毒所内进行,通过对河北省强制戒毒所内
<正>广义货币平稳增长2014年12月末,广义货币(M2)余额122.84万亿元,同比增长12.2%,增速分别比上月末和上年末低0.1个和1.4个百分点;狭义货币(M1)余额34.81万亿元,同比增长3.2
<正>中央经济工作会议首次全面阐释了经济"新常态"的九大特征,明确指出"认识新常态、适应新常态、引领新常态"将是当前和今后一个时期我国经济发展的大逻辑。作为地方政府职
胃癌是目前世界范围内最常见的消化道恶性肿瘤,其具有发病率高、死亡率高、早期诊断率较低,生存率低等特点。有许多研究表明,胃癌存在基因的表达异常,如P15、P53、FHIT、CD44