基于多目标追踪的异常行为检测算法与系统

来源 :南京理工大学 | 被引量 : 0次 | 上传用户:Ruiming123
下载到本地 , 更方便阅读
声明 : 本文档内容版权归属内容提供方 , 如果您对本文有版权争议 , 可与客服联系进行内容授权或下架
论文部分内容阅读
随着我国智慧城市、智慧交通等项目的持续开展,智能视频监控得到了越来越多的关注。智能视频监控主要包括对人或物的识别、运动轨迹跟踪以及个体状态或场景状态分析等任务。多目标跟踪算法为流量统计、异常行为检测等任务提供基础数据,是智能视频监控中的关键算法。因此,本文提出了基于深度哈希特征的多目标跟踪算法。此外,针对无人机道路监控场景,本文提出了基于多目标跟踪的异常行为检测算法,同时开发了一套无人机道路监控系统。本文主要研究工作如下:1、本文为解决多目标跟踪中由于目标遮挡、目标交互产生的目标ID交换以及跟踪中断问题,提出通过融合深度哈希表观特征以及运动特征的方式构建更为鲁棒的目标特征描述子,同时设计跟踪中断恢复机制提升数据关联准确度。本文结合行人重识别与哈希图像检索思想,将行人重识别经典网络Res Net与全连接哈希层相连接构建深度哈希网络,通过此网络提取目标行人深度哈希表观特征。在数据关联方面,本文改进了多目标跟踪机制,通过保存多帧轨迹特征实现跟踪中断后的ID恢复。通过多目标跟踪数据集MOT Challenge评估,本文提出的基于深度哈希特征的多目标跟踪算法在不改变目标检测方法的情况下有效减少了ID交换数量,提升了整体跟踪精度。2、在无人机道路监控场景下,本文以公路行驶车辆为研究对象,提出了一种基于稀疏表示的异常行为检测算法。首先,采用多目标跟踪算法获得车辆运动轨迹,将轨迹分段并根据轨迹坐标计算目标速度与角度特征。之后采用高斯滤波算法去除速度特征中由于检测精度、无人机抖动等外界因素产生的噪声,得到更为平滑的速度特征信息。最后,融合速度与角度特征并使用正常行为轨迹特征构建字典,通过字典重构误差判断测试轨迹样本是否异常。经过无人机实际采集的视频数据集评估,本文提出的异常行为检测算法可以有效检测目标车辆异常行为状态,检测精度较高。3、结合多目标跟踪及异常行为检测算法,本文设计并开发了无人机道路监控系统。该系统采用C/S架构,包括可视化模块、目标检测模块、多目标跟踪模块以及数据查询模块,各模块交互配合实现了目标检测跟踪结果实时预览、车流量统计、实时异常行为检测以及相关数据查询功能。
其他文献
驾驶员姿态估计是人体姿态估计中的一个重要应用场景,在高级辅助驾驶系统中起着关键作用。作为一个中间层信息,驾驶员姿态估计可以帮助驾驶员状态检测系统识别驾驶员状态,判断驾驶员行为是否恰当且安全。一般来说,驾驶员3D姿态估计能够比2D姿态估计提供更多的信息。因此,驾驶员3D姿态估计成为了我们的研究方向。传统的人体姿态估计是基于可见光图像或深度图像,对于驾驶员姿态估计来说,可见光图像容易受到昼夜变化和环境
自进入信息时代以来,各种良莠不齐的信息充斥着人们的生活,不少境外势力和不法分子通过互联网散布和传播一些敏感信息,以煽动并引导网络舆情。以微博为代表的各种网络媒体包含了大量关于暴力事件、恐怖袭击事件、政治时事等话题的文本,这些文本反映了用户对事件的态度,观点和倾向。敏感信息识别作为避免网络舆论被恶意引导的重要手段,近几年成为了一个重要研究问题。本文针对网络文本中的暴恐敏感信息识别任务中的情感分析和敏
近年来,物联网发展迅猛,物联网设备已经走入千家万户,其数量规模呈爆发式增长。然而,物联网设备的普及在带来便利的同时也带来了安全隐患。物联网嵌入式设备大多在计算能力、存储能力等方面受限,这使得他们往往缺乏自我保护的能力。大量的物联网设备直接暴露在攻击者的视线内,导致物联网安全事件频发,物联网设备安全受到了广泛关注,保护物联网设备的安全成为物联网安全研究中的重点。远程证明允许一个可信实体验证远距离的、
对于大多数Android应用程序而言,网络在提供应用程序功能方面起着至关重要的作用,同时网络使用导致的错误占了应用程序崩溃的很大比例。由于许多与网络相关的错误只能在特定条件下触发(例如,当网络速度较慢时,网络响应需要较长的等待时间),因此现有的常规或GUI测试方法很难将其检测出来。据统计,较少有测试应用程序中网络使用情况的工作。为解决上述问题,本文从移动应用网络相关的错误展开研究,借助软件定义的思
子空间聚类是传统聚类问题的拓展,目的是将位于多个子空间的并集上的数据点分割到其相应的子空间中。稀疏子空间聚类(SSC)和基于低秩表示(LRR)的算法是最有代表性的两种子空间聚类算法。为了获取结构更加理想的系数矩阵,本文提出了基于图正则化的子空间聚类算法。子空间聚类算法的基本方法是,建立模型寻求数据理想的表示系数矩阵,然后通过增广拉格朗日乘子法求解模型,并根据系数矩阵构建相似度矩阵,最后用谱聚类的方
视频目标分割任务是计算机视觉领域中一个非常基础但又充满挑战性的问题。这个问题可以描述为:已知视频中目标在第一帧的分割掩膜,求解后续每一帧内对应目标分割的结果。视频分割技术作为大数据处理应用中的重要一环,在当代生活中发挥着越来越不可替代的作用。与此同时,视频目标分割技术已经在视频监控、虚拟现实、异常检测和自动驾驶等领域获得了广泛的应用。现存的方法主要有两个问题需要面对:第一点是在遮挡、外观变化大、背
视频拍摄中,图像采集环境差、成像系统退化和目标物体运动等容易导致采样视频存在不必要的模糊。研究者们提出了许多优秀的视频去模糊方法。但由于视频图像特有的时空相关性,如何综合利用时空信息依然有很大的改进空间。本文首先综合回顾了国内外研究现状,分析并实现了三种经典的视频去模糊算法:加权傅立叶聚合视频去模糊算法(Weighted Fourier Accumulation Algorithm,WFA),基于
随着数字化等信息技术的不断发展,数字图像信息不管是从数量上还是规模上都在飞速增长,如何管理和应用这些海量图像资源成为当前重点研究问题之一。就图像检索技术而言,传统利用人工标注关键字进行图像检索的技术已满足不了人们的实际需要,最近几年,基于内容的图像检索技术逐渐成为了新的研究热点。通常人们判别两张图像的相似程度并非根据图像的底层特征,而是根据图像描述的内容。而计算机对图像底层特征的理解较为容易,对获
为了探索大学生在网络学习中师生交互与学习投入的关系,以及自主动机和学业情绪在其中的中介作用,本研究采取问卷调查法,使用师生交互问卷、自主动机问卷、大学生学业情绪量表、学习投入量表,对563名大学生开展调研。结果发现:网络学习中的师生交互既可以直接显著正向预测学习投入,也可通过积极情绪间接影响学习投入,还可依次通过自主动机和积极情绪的链式中介作用正向预测学习投入,而消极情绪在其中的中介作用不显著。研
多模态视网膜成像可以为视网膜疾病的解读与评估提供多方位的信息,将不同模态图像提供的互补信息进行多模态融合可以辅助临床医生进行病情诊断及评估。本文利用图像处理和分析的方法来对视网膜病变图像进行多模态融合,主要包括以下研究内容:(1)提出一种基于频域光学相干断层成像技术(SD-OCT)和相干光断层扫描血管成像(OCTA)体数据的脉络膜新生血管(CNV)多模态融合算法,算法主要包括以下四个部分:预处理、