视频事件结构化描述方法研究

来源 :南京邮电大学 | 被引量 : 0次 | 上传用户:wangfang
下载到本地 , 更方便阅读
声明 : 本文档内容版权归属内容提供方 , 如果您对本文有版权争议 , 可与客服联系进行内容授权或下架
论文部分内容阅读
随着视频事件描述的发展,基于文本的描述方式与基于内容的描述方式由于其存在的缺陷,已经不再适用于描述交通监控视频中发生的事件。本文的研究内容是交通视频中事件的描述与识别,其是针对视频的无结构性提出的,旨在提供对视频内容的层次化表达。目标是针对交通监控视频内容按照语义关系,利用深度学习、本体论、逻辑描述语言等处理手段,组织成可供计算机和人能理解的信息。具体的研究内容如下:首先,针对视频内容的无结构性的特点,设计了一种新型的丰富语义模型,即视频事件结构化描述模型(VSD)。该模型提取了视频中的对象、属性及关系等信息,构成视频本体,能够有效地描述视频内容,以减少低级别语义(特征)和高级别语义(事件)之间的差距。对于交通视频本体的实际创建过程,提出了利用Protege软件和从数据库转换两种构建方法,并对从关系数据库到领域本体的转换过程进行了详细分析。实验借助于Protege工具,进行了交通视频事件结构化描述模型的实现,这为下文事件描述研究提供实例创建。最后将此描述模型利用相关规则进行评分,直观地展示了所提出模型的优越性。其次,在对象描述方面,研究了模式识别和描述逻辑两个领域,即从交通对象识别检测和对象关系映射推理两个方面来进行对象语义表示。在视频对象识别检测研究过程中,探索了卷积神经网络的结构特点,提出了一个适用于交通对象识别的网络结构,对其进行参数优化,结合R-CNN对象检测方法,在实验中得到了良好的检测效果;在对象关系映射的研究中,给出了视频事件结构化描述模型中对象空间关系的具体定义(包括RCC空间拓扑关系和井字形空间方向关系),并利用本体逻辑语言进行对象关系描述。最后引入了对象一致性推理算法,用于进一步推测交通对象之间的语义关系。最后,结合视频事件结构化描述模型和对象映射的方式,提出了基于场景上下文的事件描述方法。即预先设定了交通视频中的空间、时间、特殊值上下文,利用其与目标对象的关系提取视频中每一帧的语义信息。以此为基础,在交通事件识别上引入了事件单元概念,提出了基于贝叶斯分类器和有限状态自动机的事件识别方法,用于实现简单与复杂交通事件的识别。实验中证明了所提出的事件描述方法和识别方法的可行性。
其他文献
伴随信息处理和计算机视觉技术的不断提高,智能视频监控以其广泛的应用前景和潜在的经济价值在现代安防系统中受到了高度重视。这种在无人干预情况下,自动提取用户敏感信息及
在现代实时信号处理领域,高速数据采集已经成为信号处理系统中不可或缺的部分。而在雷达、通信、航空航天等领域,系统对数据存储设备的要求越来越高。高速数据采集系统要求存
本文从不确定度的角度评价视觉里程计的性能,以及如何利用不确定度知识提高里程计的精度,都是值得研究的课题。本文立足立体视觉里程计,针对其中的一些核心算法,进行了严密的
随着无线局域网(Wireless Local Area Network,WLAN)技术的成熟和应用的日益普及,越来越多的企业、校园、城市开始大规模部署无线网络,接入无线网的终端用户数和无线设备的规模在
摘要:中国石化海上石油工程技术检验中心作为国家安监总局授权的海洋石油设施第三方发证检验机构,承担了吉林油田T73落江井治理作业平台及栈桥工程的发证检验工作。检验师依照法律、法规和相关标准对作业平台进行设计审查和建造检验,使之满足国家法律法规的要求和生产操作的需要。  关键词:落江井 设计审查 发证检验  前言  T73落江井治理工程是在松花江上开展的石油作业活动,是吉林油田重点工程项目。根据200
期刊
随着科学技术的高速发展和社会信息化进程的不断深入,信息通信技术、计算机技术以及物联网技术等被广泛应用到人们生活的各个领域,大大提升了人们的生活品质。居家环境作为人
在下一代移动通信系统中,数据的相干检测和软译码等处理都需要预先知道信道估计中给出的信道传输系数,这些信道估计传输系数的估计精度直接决定了系统接收机的性能,因此信道
多输入多输出(MIMO)技术在不需要增加额外频带的基础上,能够使得信道容量增加几个数量级,这种显著优势促使其成为未来无线通信的关键技术。然而,多蜂窝MIMO技术在实际通信系统下行
短波通信具有可进行中远距离通信、发射功率小、抗干扰能力强、设备简单等优点,因而被广泛应用于现在通信中,短波激励器是短波发射机的重要组成部分,主要用于产生所需要的各种激
冒顶事件作为常见的井下安全事故给国家财产和人民的生命安全造成了巨大的威胁和损失,加强对顶板压力的监控对煤矿安全生产具有重要的现实意义。传统的矿山压力观测仪需要人工