基于光流信息的特征点匹配以及Siamese框架的单目标跟踪研究

来源 :深圳大学 | 被引量 : 0次 | 上传用户:wangruiqiangkang
下载到本地 , 更方便阅读
声明 : 本文档内容版权归属内容提供方 , 如果您对本文有版权争议 , 可与客服联系进行内容授权或下架
论文部分内容阅读
随着计算机视觉的快速发展,视觉跟踪下的单目标跟踪越来越受到大众的关注。跟踪算法的发展从卡尔曼、粒子滤波器和特征点匹配的生成式模型到如今的基于相关滤波框架和Siamese(孪生)框架的判别式模型,跟踪算法的精度以及速度在不断提高。基于特征点匹配的算法优点是结构简单,无训练过程。但是其存在着精度不高,遮挡时特征点消失的问题;基于Siamese框架的全卷积网络算法速度快,但其只考虑了外观特征,所以无法很好跟踪背景复杂以及剧烈运动的物体。针对以上问题,本文对基于光流信息的特征点匹配以及Siamese框架的单目标跟踪算法进行研究。具体如下:1.提出了一种虚拟特征点和模糊权重的方法。基于特征点匹配的跟踪算法是传统模型最主要的实现方式,但是其在目标受到遮挡时鲁棒性低。因此,在CMT算法的基础上,加入了几何统一性的虚拟特征点补充方法,在目标受到遮挡的时候弥补特征点的不足。光流信息是物体运动信息重要的表征方式,其有相位可靠性高、对光照变化鲁棒性高的优点。因此提出了模糊理论的三分法来融合特征点匹配框和光流跟踪框,在不影响速率的前提下提高了算法在目标被遮挡时候的跟踪精度。2.提出了一种时序打分模型,高效地将光流网络融入到跟踪算法的框架中。SiamFC是目前主流的单目标跟踪算法之一,其提出了双路输入和相互卷积的方法进行跟踪。本文在Siamese框架的基础上将丰富的光流信息融入跟踪网络中:应用双线性插值融合光流信息到不同的视频帧,同时通过时序打分模型融合不同的候选检测帧。通过对光流网络的应用,解决了剧烈运动下目标模糊难以跟踪的问题。3.提出了一种判别器注意力模型。在Siamese跟踪框架下,模板帧在判别响应图上每个位置的贡献差别不大,这会得到错误的响应峰值从而跟丢目标。因此本文提出了三种不同的注意力模型,分别是光流注意力模型、归一化注意力模型和滴漏注意力模型,同时比较了他们对算法跟踪效果的影响。基于Siamese框架的SiamFlow算法结合了深度网络的离线训练和在线跟踪的优点,做到了实时跟踪。为了提高算法的准确性,SiamFlow算法在ILSVRC15数据集上进行训练。同时在0TB(Object Tracking Benchmark)和VOT(Visual Object Tracking)跟踪数据集上进行实验,均取得了不错的效果。实验结果表明该算法能高效地跟踪目标,对遮挡、剧烈运动和消失的物体有很好的鲁棒性。
其他文献
伴随着科学技术的进步,由时间尺度上时滞动力方程描述的数学模型在控制工程、物理学、海洋学、光学、生物环境与医学等工程领域具有广泛的应用,其定性性质的研究也得到了迅速
图能量的研究是图谱理论的一个重要研究领域.图能量与分子的化学性质之间存在密切的关系,在化学图论中,图能量的定义来自于对全π-电子能的Hückel分子轨道的近似估计.图的能
众多的储能设备中锂离子电池由于它能量密度高,循环稳定性好等优异的特点,引起了人们的广泛关注并将其很好的应用于手机等便携设备中。随着计算科学的发展,计算模拟在研究新
聚碳酸酯(PC)具有优异的综合性能,广泛应用于电子电气、航天航空、建筑、汽车、家用等领域。PC虽然具备一定的阻燃性能,但其在燃烧过程中存在严重的滴落现象,仍不能满足对阻燃要求更严格的领域的需求。因此,为扩展PC的应用范围,目前主要从事开发无卤、高效、低烟、环保、综合性能优异的阻燃剂。三嗪类化合物具有良好的成炭性,是一类重要的高分子材料阻燃剂。本文以三聚氯氰为基体,合成一种含氮硫硅三种阻燃元素的三嗪
棉花是世界上最重要的经济农作物之一,在我国的国民经济中占据重要地位。TE在棉花基因组中的比例超过50%,LTR类反转录转座子是棉花基因组TE中最丰富的转座元件,其中Copia和Gy
在纵火案件中,高温、灼烧、灭火人员的破坏、水泡等都会增加提取可疑助燃剂碎片的难度,特别是对于易挥发性助燃剂更难提取,同时纯度不高的样品也不利于检测鉴定。但是,复杂的
金属陶瓷刀具材料的低韧性和低耐磨性问题,限制了其发展。为了推动其发展,本文采用非均匀成核法对c-BN进行表面包覆处理后,将其添加到混料中,使其均匀分布在陶瓷相颗粒的晶内
主动磁悬浮轴承控制性能的优劣是判断主动磁悬浮轴承好坏的重要依据。由于主动磁悬浮轴承是一个复杂的系统,这给控制系统的设计和优化大幅度增加了难度。本文主要针对推力主
近年来,图像分类成为了计算机视觉和模式识别领域的一个研究热点。特征提取算法作为图像分类的基础,备受研究者的青睐。本文采用几何代数为数学工具,结合视频图像和高光谱图
涤纶织物连续热溶染色是一种短流程的节能减排技术,本研究围绕薄型涤纶织物柔软/染色、防水/染色同浴的一步法工艺展开研究:1)研究柔软剂/液体分散黑MP染料的同浴热溶染色工