基于卷积特征与时间信息融合的目标跟踪算法研究

来源 :山东科技大学 | 被引量 : 0次 | 上传用户:gcq1987
下载到本地 , 更方便阅读
声明 : 本文档内容版权归属内容提供方 , 如果您对本文有版权争议 , 可与客服联系进行内容授权或下架
论文部分内容阅读
计算机视觉是人工智能领域重要的研究方向之一,而作为计算机视觉主要分支的目标跟踪技术受到国内外学者的重视。传统的目标跟踪算法主要利用相关滤波方法处理手工设计的低维目标特征实现跟踪。然而,由于手工特征不能从本质上刻画目标,因此会导致跟踪性能受到限制。深度学习技术可以将低层特征组合成抽象的高层特征,从而克服手工特征表征不足的问题。目前,基于深度学习的目标跟踪算法大都是使用卷积神经网络来研究这一问题。这类方法首先利用卷积神经网络对目标物体进行特征提取,然后采用回归或分类的方法根据最后一层卷积层提取的特征对目标物体进行定位。虽然这些方法也取得了不错的跟踪性能,但是仍然存在“忽略帧间相关性”及“未充分利用各层卷积特征”等局限性。为了提高跟踪算法的性能,本文综合考虑各卷积层提取的特征及视频帧之间的时间相关性,提出一种融合卷积特征与时间信息的跟踪模型(A tracking model of fusing convolutional features and temporal information,FCFTI)。本文完成的工作如下:(1)针对ADNet模型只将最后一层卷积特征作为目标物体的表征结果的问题,本文提出了一种融合不同卷积层特征的改进方法(An improved method of fusing convolutional features,FCF),将浅层特征和深层特征融合;针对ADNet模型无法挖掘视频帧之间时间相关性的问题,本文提出了一种综合考虑时空信息的改进方法(An improved method of fusing spatial-temporal information,FSTI),将循环神经网络引入到模型中,通过循环神经网络将当前帧的目标特征与历史帧的目标特征融合后作为目标最终的表观结果;针对现有算法大多仅采用最后一层卷积层提取的空间特征描述目标,且没有挖掘视频帧间时间相关性的问题,本文提出了 一种融合卷积特征与时间信息的跟踪模型(A tracking model offusing convolutional features and temporal information,FCFTI)。(2)在OTB数据集上进行了大量的对比实验。首先,选择ADNet模型作为基准模型。其次,分别将本文提出的改进方法与基准模型进行跟踪性能对比。然后,将本文提出的FCFTI模型与数十种公认性能较好的算法进行对比。实验结果表明,结合各层卷积特征的算法及融合时空信息的算法都可以提升跟踪性能,本文提出的同时考虑各层卷积特征和时间相关性的FCFTI模型跟踪效果好于其它对比模型。
其他文献
无线传感器网络包含大量多功能、低功耗、廉价的传感器节点。节点间采用自组织的无线通信方式相互传递信息,协作完成特定功能。无线传感器网络具有部署灵活、扩展方便、成本低、能快速从周围环境中获取信息等优点,在工业、农业、军事用途、环境监测、交通管理、医疗卫生等众多领域都有着广阔的应用前景。由于传感器节点资源受限的特性以及外部环境条件的限制,延长WSN网络的运行周期是一个十分重要的问题。在为无线传感器网络设
随着电子技术的不断发展,各种类型的硬件和软件开始应用到了各个行业中,但是在应用过程中出现的木马严重威胁到了信息管理的安全性,而存在于芯片中的硬件木马在危害程度上显著高于软件木马,这引发了学术界的关注。首先,本文使用EP4CE30F23C8型号FPGA实现了SM3加密算法,以此来模拟一个专用加密芯片。在FPGA中设置了12个环形振荡器(Ring Oscillator,RO),理论上有硬件木马的环形振
鱼油的营养价值极高,常被添加到水产养殖饲料中,但因其包含丰富的多不饱和脂肪酸,在生产运输及储存过程中由于一些不可抗拒的因素作用,性质不稳定的脂肪酸极易发生氧化变质,氧化后的鱼油产生的初级及次级代谢产物如醛、酮、醇、酯、酸等化合物直接影响水产动物对饲料营养成分的吸收和利用,威胁养殖对象的健康,进而给养殖户造成巨大的经济损失。目前对氧化鱼油的研究方向大多集中在其对水生动物带来氧化应激的消极影响,而关于
蔬菜是居民日常生活中的刚需性消耗品,由于自身易腐的特性以及人民生活水平的提高和物流业的发展,蔬菜对冷链的要求不断提高。通海县作为云南省重要的蔬菜生产基地,蔬菜产业
Because of the unique advantages,continuous-variable quantum key distribution has been greatly developed in recent years.Because the devices used in the prepara
随着通信电子产业的迅猛发展,无线终端相关的电子产品日渐增多,无线能量传输逐渐成为相关领域的研究热点。实现无线能量传输的具体方式主要有感应式、耦合谐振式以及电波辐射式三种,其中电波辐射式无线能量传输技术以传输距离相对较远等优势成为最有研究价值的方向。现今,无线能量传输效率一直很低,在众多原因当中,很大一部分原因是由于接收端的整流电路效率低下引起的,而在整流电路当中最核心的整流器件就是整流二极管。通常
我国经济已经从高速增长阶段转向高质量发展阶段,经济增长不仅要看速度,更要看质量。但我国上市公司普遍存在的非效率投资现象,严重制约了企业间资源配置效率、企业资本结构调整与企业价值增长。投资效率是提升企业价值的重要因素之一,然而由于受委托代理问题、信息不对称、管理者过度自信等因素的影响,企业管理者往往很难做出正确的投资决策,导致非效率投资。因此研究影响企业非效率投资行为的因素及其相关性,对于企业完善资
针对目前内镶迷宫滴头滴灌带生产过程中存在的打孔质量不稳定且普遍采用人工检测的现状,将机器视觉技术应用到滴灌带生产中。通过工业相机采集现场图像并进行一系列的图像分析与处理,识别、测量得出滴孔的位置偏差。然后将位置偏差反馈给控制器并控制打孔机进行调整,从而使系统形成闭环,实现滴孔加工位置的在线检测与反馈调节。在对检测系统进行总体结构和工作流程设计后,对机器视觉模块进行硬件的选型与安装。然后重点对基于机
随着城市化进程的快速发展,农村人口急剧减少,产业发展水平滞后,传统文化流失。根据国家政策和地区发展要求,对于具有文化特色和农业基础的贫困乡村,发展乡村旅游成为提升当地社会经济水平的重要手段。通过乡村旅游景观规划设计,优化重组农业产业结构,深度挖掘当地传统文化,保护生态可持续发展,打造特色乡村旅游主题,带动当地旅游经济和农民收益。本文通过文献综述法、实地考察法、归纳总结法、综合分析法,在大量查阅了国
为了更深入地理解视觉世界,计算机不仅需要检测出复杂场景中的单个目标,还要对目标间的关系进行推理。在各种视觉关系中,我们最关注的是场景中的人与其他物体间的关系。人物交互(Human-Object Interaction,HOI)检测是用于判断人与物体间的交互行为的计算机视觉任务,具有巨大的实际应用价值和潜力。HOI检测通常被理解为检测三元组<人、动词、物>,在检测出人和物体的基础上,对候