基于视频的交通场景下运动目标检测研究

来源 :山东大学 | 被引量 : 0次 | 上传用户:xucaijuan302
下载到本地 , 更方便阅读
声明 : 本文档内容版权归属内容提供方 , 如果您对本文有版权争议 , 可与客服联系进行内容授权或下架
论文部分内容阅读
交通场景下的运动目标检测是计算机视觉领域中的重要研究方向,同时也是无人驾驶和辅助驾驶系统的重要组成部分。然而复杂多变的背景以及运动目标自身的运动属性,单帧图像中普遍存在着运动模糊、失焦模糊以及目标遮挡等问题,这都给运动目标检测任务带来了巨大挑战。鉴于以上问题,如果直接使用基于静态图像的目标检测器,效果并不理想。但是经过分析发现,在一组连续的视频帧中,总会存在若干各高质量特征的图像帧,能够使目标检测器表现出理想的性能。因此,本文改进基于静态图像的目标检测器,通过提取目标的运动信息,融合相邻帧特征,从而提升当前帧的特征质量。主要工作内容如下:本文设计并实现了一种基于可变形卷积的特征对齐网络。由于目标在不同图像帧中的空间位置和姿态均不一致,如果直接融合特征,会导致多个时刻的特征错位叠加,反而不利于目标检测,因此在特征融合先必须进行特征对齐操作。本文探究了Farneback光流法和可变形卷积在特征对齐方面的表现,并最终确定使用可变形卷积来实现特征对齐。该卷积可以学习目标特征在两帧之间的像素级对应关系,并利用其强大的空间变换能力进行特征映射。首先输入当前帧和相邻帧的特征图,利用基于可变形卷积的网络结构对目标的运动信息进行建模,并将相邻帧的特征映射到当前时刻。为了聚合相邻帧的特征,本文实现了时空特征融合模块。在融合特征的过程中,本文使用余弦相似度作为距离度量,特征越相似余弦相似度越高,从而权重越大。同时本文利用了残差结构,降低训练难度。这种融合方式根据特征对任务的贡献大小,有效的将不同时间和不同空间上的特征聚合到一起。本文首先将对齐后的特征图通过权重网络,计算余弦距离并归一化权重,然后对相邻帧的特征加权求和,即可得到聚合后的特征。本文使用CenterNet网络作为目标检测子网络,用于在融合后的特征图上检测运动目标。CenterNet网络是单阶段的目标检测器,相较于Faster RCNN两阶段目标检测器,速度方面具有更大优势。同时CenterNet网络不使用Anchor作为先验候选框,因此不需要人工手动设计参数,提高了网络在不同数据集上的泛化性能。为了在保证检测精度的前提下,提升模型速度,本文通过图像相似度、图像清晰度以及目标运动尺度进行了问题帧的选取,并只在问题帧进行特征融合。为了验证改进的运动目标检测器的效果,本文结合UA-DETRAC和KITTI两个交通场景数据集设计实验,从数据集的目标类别、检测难易程度等多个角度对改进模型的性能进行分析研究,同时与目前常用的目标检测模型以及改进前的模型进行对比,验证了本文算法的有效性。
其他文献
<正>识字与写字是阅读和写作的基础,既是第一学段的教学重点,也是贯串整个义务教育阶段的重要教学内容。2012年初,《义务教育语文课程标准(2011年版)》(以下简称"课标")正式
目前,以突发事件为背景的网络舆情是社会危机的重要源头之一,由此产生和蔓延的网络情绪引发了各种情绪化问题,为突发事件网络舆情的应急管理增加了极大的不确定性,如何从情绪层面有效治理此类舆情已然成为社会治理工作中的重要问题。随着时代的更新和发展,社会矛盾日益凸显,突发事件频繁发生,自由开放、隐匿互动的网络环境,也为广大网民提供高度的参与机会、丰富的话语权利,同时塑造了其非理性化的特点,促使网民快速引发网
篆刻艺术是一种可以独立欣赏表现性艺术。它将汉字书法的结体美与章法表现的形式美、刀法展现的线条美及金石自然美融为一体,以独立欣赏的表现性艺术。本文从学习基本的篆刻
10年来,博客已在整个世界范围尤在中国取得长足和飞速发展。博客改变了传统的书写方式,给出版和传媒带来新的观念和模式,也带来冲击,开创了知识和思想自由传播的新时代。正如
古汉语中的虚词和实词比较起来,虽然数量并不多,但是却很难加以把握。本文从把握古汉语的意义与作用、重点掌握古汉语虚词的用法、对古今虚词进行比较、牢记古汉语虚词典型等
随着城市轨道交通全自动运行系统(Fully Automatic Operation, FAO)关键技术的发展和自主化全自动运行系统示范工程的应用,越来越多的城市轨道交通线路采用FAO系统。全自动运
目的了解孕产妇并发肺栓塞病死亡的高危影响因素,提出针对性的干预措施,提高保健质量,有效地降低孕产妇死亡率。方法对2004~2011年长春地区死亡孕产妇中17例死于肺栓塞病者年
1977年冬,中断了十年的高考制度恢复,一大批热血中青年涌进大学校园,开启了他们的知识之旅。恢复高考制度的伟大意义是不容忽视的,本文将从政治、经济、教育、社会等四个层面
课程思政是当前高校思想政治工作的新理念,是各方高度关注的理论和实践问题.如何将思政教育水到渠成地融入理工科课程教学,做到知识传授与价值引领的相辅相成、相得益彰,存在
目的:通过观察益肾补脾方治疗2型糖尿病肾脏病Ⅲ期脾肾气虚型患者的微炎症与营养不良状况,评价中西医结合治疗糖尿病肾脏病微炎症与营养不良的疗效性。方法:本研究选取我院门