基于视频流的图像拼接技术研究与实现

来源 :华北水利水电大学 | 被引量 : 0次 | 上传用户:xiaoquan1234
下载到本地 , 更方便阅读
声明 : 本文档内容版权归属内容提供方 , 如果您对本文有版权争议 , 可与客服联系进行内容授权或下架
论文部分内容阅读
基于视频流的图像拼接技术是提取一段视频中的若干关键帧,将关键帧重叠区域的图像进行特征点配准、边界缝合后生成一张完整的拼接图像,该技术在计算机图形学、视频监控、无人机航拍图像、遥感影像等领域展示了广阔的应用前景和价值。
  随着计算机技术和信息化的快速发展,图像拼接技术可以准确高效地将视频流中的关键信息以图像的方式展现出来,满足实时性的要求。铁路交通监控视频就是其中的典型代表,通过研究图像拼接技术,及时发现安全隐患,保障社会生活的有序运行。但是由于视频数据量大,计算方式复杂,且图像容易发生畸变,目前仍存在许多问题。比如:视频关键帧的自动提取、图像特征点和特征区域的选取、图像融合平滑过渡等等。这些问题的解决,将会对基于视频流的图像拼接技术产生较大的推动作用。
  因此,本文从视频图像拼接技术的具体需求出发,在研究一系列传统的图像拼接算法的基础上,结合目标检测和深度学习领域的关键技术,设计了一套基于视频流的图像拼接算法,主要内容可概括如下:
  (1)设计基于目标检测的关键帧提取算法
  针对视频关键帧的自动提取技术,通过卷积神经网络(CNN)在目标检测领域的应用,设计了一种基于目标检测的关键帧提取算法。其中包括选取SIFT特征点作为关键帧粗识别,利用卷积神经网络挖掘图像深度特征作为关键帧精识别,进而使用SVM分类器将图像特征进行分类,得到视频关键帧序列。根据平均关键帧率的大小作为评价指标,对关键帧提取算法效率进行对比分析,经过实验结果验证,本文提出的算法有效地减少了关键帧的数量,同时平均关键帧率也降低了40%左右,提高了关键帧提取的效率和准确度。
  (2)提出基于重合区域极值检测的SIFT图像拼接算法
  在基于特征点的图像拼接算法的基础上,提出了基于重合区域极值检测的SIFT图像拼接算法。对关键帧图像序列,排除非重叠区域的特征点,仅考虑重叠区域的极大值特征点对,利用重叠区域特征极大值提取法提取SIFT特征点,然后根据Harris角点对尺度变换的敏感性,在已提取出的SIFT特征点内检测Harris角点,舍去平滑区域特征点,接着采用BBF特征点搜索算法提高搜索效率,利用RANSAC特征点提纯算法去除无效特征点,最后采用基于渐入渐出阈值分界的图像融合算法消除拼缝,完成特征配准、图像变换以及图像融合。
  (3)算法实现与性能分析
  为验证本文提出的算法的有效性,设计了一个基于视频流的图像拼接原型试验系统,实现了铁路交通监控视频中的关键帧提取和车厢图像拼接。在条件允许的情况下,重点分析了图像配准中的BBF特征搜索率以及RANSAC特征提纯率和图像融合中的信息熵、互信息、平均梯度等一系列评价指标,结果表明:本文提出的算法不仅减少了拼接所需的关键帧的数量,缩减了时间消耗,图像配准的准确率和拼接质量也得到了较大幅度提升,改善了基于视频流的图像拼接算法效率。
其他文献
消费社会的产生与发展使得奢侈品的消费成为世界范围内的一种消费现象,并催生相应的奢侈品消费文化。奢侈品的消费已经不仅仅是对物的消费,而更多体现在对时尚和生活方式的追求。奢侈品成为人们展示身份、品位、社会地位和金钱的符码,品牌消费成为符号消费的代名词。在这之中,大众媒体,尤其是新兴的网络媒体对奢侈品消费的传播,也使得奢侈品被赋予了更多的内涵,其中的符号消费和在消费中获得社会认同的意味愈来愈强。  中国
学位
在西方国家艺术家通过艺术作品塑造了各种男人和女人的形象,而女人们平日的生活都必须由男人决定。伊斯兰教中的女性与西方女性大致形同,但从绘画作品中却体现了不同宗教中艺术的不同。《圣经》中的女性形象都各有其特色。许多艺术家都会将女性的唯美、生动、性感的姿态展示在作品中。《古兰经》讲述了伊斯兰教对社会的理解,许多艺术家在《古兰经》的要求范围下进行艺术创作,多展现人的生活,所以伊斯兰艺术是宗教和艺术的融合。
学位
题材是美术家在审美地认识生活的过程中,按照一定的创作意图和对生活素材进行选择、提炼、加工、改造,而在美术作品中具体描写的一定的现实生活。风景油画中的题材经过几个时期的演变发展到现阶段,从功能上来说第一它脱离了为政治服务的功能,第二它脱离了单纯的审美的功能,它打破了最开始单一对自然描绘的形式,正逐渐走向多样化的较好局面。在我们看到了多样化的风景油画题材的同时,还是存在很多问题,还需要艺术家从自身、社
学位
全球变暖等气候变化导致极端天气频发,其中降雨分布不均会显著影响生物多样性,并对生态系统结构和功能产生复杂影响。干旱半干旱草地生态系统对降雨量变化最为敏感,降雨量变化会直接影响草地上的动植物种群及其演替。本研究通过在内蒙古典型草原建立大型围栏,测定实验围栏内主要植物凋落物的分解速率和植物群落的结构变化,探讨降雨量变化和布氏田鼠活动对植物凋落物分解和群落结构的影响,为合理管理布氏田鼠种群数量以及草原的
学位
六堡茶是广西有名的黑茶品种,其生产过程的关键步骤之一就是“渥堆”,此期间有大量微生物繁殖,在微生物的作用下产生特殊的香味及茶的各种物质。本研究目的在于探索六堡茶中的真菌微生物及基因资源,以期将其利用到烟制品和茶叶中。研究主要内容及结果如下:  (1)菌株的筛选与鉴定:①从广西六堡茶中分离得到四株具有潜在利用价值的真菌。通过显微观察微观形态和分子鉴定结合的方法鉴定出这四株真菌所属的物种。分别命名为:
学位
期刊
本文使用阳离子胶体金(CCG)标记中国仓鼠卵巢细胞(CHO-K1)的阴离子场,并采用双光子荧光显微成像和荧光寿命成像技术对其进行成像。金纳米微粒在飞秒激光的扫描照射下可以产生光热效应,这种纳米尺度的微效应在不影响细胞活性的前提下可以暂时提高阳离子胶体金标记细胞膜位点的通透性。基于这种效应,我们将10k道尔顿的荧光探针大分子(FITC-D)递送到CHO-K1细胞的内部。
计算机视觉领域中包含了各种各样的图像分析与处理技术,目标跟踪是它的一个重要组成部分。现有的目标跟踪算法中,存在着精度与速度的矛盾,往往精度高的算法速度较慢,而速度快的算法精度较低。对于不同场景下的要求,需要对速度与精度进行权衡。在超高速目标跟踪场景下,要求跟踪速度必须极快并且精度不能过低,因此研究一种计算速度极快并且精度尚可的目标跟踪算法具有重要的意义。  弹载应用场景对目标跟踪平台的体积和功耗有
介绍通信集成电路相关的硅基CMOS工艺、GaAs HBT与HEMT工艺、SiGe HBT与BiCMOS工艺,介绍东南大学射频与光电集成电路研究所利用多种工艺实现的光纤通信集成电路部分研究成果。
随着网络信息技术迅猛发展,人们尽管有越来越多获取信息的方式,还是抵不住信息过载问题的影响——越来越难以准确、快速地定位到所需要的信息。个性化推荐系统是缓解信息过载问题,满足用户个性化需求的重要手段。针对推荐系统中传统基于用户的协同过滤推荐算法的数据稀疏、冷启动问题,提出了SUBCF_CK算法。相较于传统算法,SUBCF_CK算法主要改进工作如下:为减轻用户-项目评分矩阵的稀疏问题对推荐效果的影响,
学位