基于内容的交互式视频检索

来源 :东南大学 | 被引量 : 0次 | 上传用户:luo311
下载到本地 , 更方便阅读
声明 : 本文档内容版权归属内容提供方 , 如果您对本文有版权争议 , 可与客服联系进行内容授权或下架
论文部分内容阅读
随着互联网和多媒体技术的迅速发展,视频信息资源日益丰富,面对海量视频信息,如何快速有效地进行视频内容分析和检索成为当前视频信息领域研究的热点。基于内容的视频检索综合了视频处理、图像理解、模式识别、数据库等领域的知识,使用视频底层特征作为检索依据,克服基于文字检索方式的不足,具有广阔的应用前景。 论文针对基于内容的交互式视频检索技术中镜头边界检测、镜头相似性度量、视频检索相关反馈以及相关反馈中半监督学习等问题展开研究,主要工作如下: (1)提出一种基于运动补偿的自适应阈值镜头边界检测方法:用一个累积帧存储每一帧间的差异,放大渐变的特征变化,利用块匹配算法对运动进行估计和补偿,减少物体运动对镜头边界检测的影响,并根据帧颜色亮度和饱和度与阈值之间的关系,自适应地选取阈值,提高镜头边界检测的准确性。通过对不同视频片段镜头分割实验,结果表明本文的提出的算法能够在较小计算强度下很好地实现镜头渐变检测。 (2)提出一种基于组合相似性的镜头相似性度量方法:首先通过视觉聚类方法对镜头进行关键帧提取,把镜头看作关键帧序列组成的组合,把两个镜头的相似性度量建立在组合相似性上,然后基于核方法,通过一个非线性映射,把原始数据空间映射到一个高维特征空间,在这个空间中可以假设特征向量表示的关键帧序列服从高斯分布,利用常用概率距离公式得到两分布之间距离值,以此衡量两个镜头的相似程度。该方法从整体上度量两个镜头之间相似性,克服了关键帧(帧)之间点点比较的缺点,实验结果表明,该方法的检索效果明显优于传统的基于欧氏距离的方法和最近邻线(NFL)方法。 (3)在检索过程中引入人的因素,提出一种基于贝叶斯相关反馈的交互式视频检索方法:视频库中每一个镜头与查询例子的相似程度由该镜头目标概率来衡量,每一次迭代过程中根据目标概率变化从视频库中选择若干镜头供用户标记,系统根据用户标记的相关和不相关镜头估计用户模型,利用用户模型结合上一次迭代得到的目标概率通过贝叶斯公式得到视频库中每一个镜头新一轮的目标概率,使得与查询例子相似的镜头目标概率值不断增加。实验结果表明,在不同镜头相似性度量下,该方法均可明显提高检索性能,且只需要很少的反馈次数就能达到很好的检索效果。 (4)在交互式视频检索中,针对相关反馈在线学习中训练样本少、存在大量未标记样本、在线特征选择问题和训练样本的不对称性等问题,提出一种基于高斯随机场模型(GRFM)半监督学习视频检索相关反馈方法:利用半监督学习算法根据用户标记的相关和不相关镜头,结合本轮目标概率更新后视频库中大量未标记镜头,首先利用标记和未标记镜头建立一个图,其中,图中结点为标记和未标记镜头,图中边的权值由镜头之间的相似程度决定,然后求解根据流形假设定义的能量函数的最优值,从而获得对未标记镜头的最优标记,使得相关反馈学习中训练数据集得到增强,改进相关反馈学习能力。实验结果表明结合半监督学习算法后贝叶斯相关反馈视频检索性能有一定的提高。
其他文献
在钢铁生产中,炼钢-连铸生产是炼钢厂生产流程中的关键工序,生产过程中各工序之间不仅存在物流平衡和资源平衡问题,而且存在时间平衡问题。该问题的有效解决能够均衡各工序负
本文以道路交通实物仿真实验系统为对象,选用Matiz仿真车模SP3-XT作为车架原型,通过自行设计主控电路板并开发相应的控制程序,开展了仿真车辆控制系统的设计与开发。论文首先
高压输电线路智能巡检机器人是随着输电工程技术发展的需要而产生的。此类机器人系统可以在输电线路上实现监控状态下的自主行走与视觉监视,跨越塔杆等作业,大大减轻了输电维
学位
随着社会的发展,人脸识别技术在现实社会中的应用变得越来越广泛。在实际的视频监控系统中,图像设备采集到的图像往往含有姿态变化和分辨率低等影响因素,而现有的方法对于伴随多
随着中国经济的快速发展,大中城市发展速度加快且流动人口数量庞大,交通运量不足已成为限制城市进一步发展的瓶颈。作为城市交通系统中的重要一员,地铁具有方便快捷、受天气
近年来,无线传感器网络技术在结构健康监测中的广泛应用,引起了科研人员的很大关注。无线传感器网络(WSN-Wireless SensorNetwork)是由多个节点组成的面向任务的无线网络,综
矢量控制调速技术在速度控制与转矩控制方面可以与直流调速系统相媲美,是异步电机变频调速技术的重要发展方向。针对交流电机转子时间常数的变化对按转子磁场定向的矢量控制系统影响最大的特点,本文深入探讨了目前交流电机控制技术中的电机参数辨识方法,通过对各种参数辨识方法的对比分析,提出了一种基于MRAS的转子时间常数在线辨识器。在MATLAB/SIMULINK仿真平台上对该辨识器进行仿真,仿真结果表明该辨识器
摩擦试验机是测定制动装置及刹车副性能的基本设备之一。为准确检测摩擦材料的各项性能指标,旧有的试验机测控系统已不能满足广大用户的测试需求,迫切要求新一代试验机测控系
实施油罐区有效的监控对提高管理水平,降低工人的劳动强度,改善工人的工作条件,避免事故的发生等方面具有十分重要的意义。近年来,随着罐区规模、储罐数量的增加,对油罐区储