煤矿无人开采是目前全球各个煤矿追求的目标,集中监控平台在无人化工作现场中扮演重要的角色。集中监控的前提是系统能将多摄像头拍摄到的视频进行融合,形成一个煤矿的全景图像,其中需要用到视频融合技术。视频融合技术的基础是图像融合。图像融合是将来自场景的两个或多个图像的信息组合成单个合成图像的过程,其更具信息性并且更适合于视觉感知和计算机处理。图像融合的目标是减少不确定性并减少输出中的冗余,同时最大化有助于应用程序或任务的相关信息。本文针对无人化工作现场中对如何集中监控平台这一问题进行研究,并提出一系列煤矿综掘工作面视频融合方法,主要创新点如下:(1)针对多视角视频在实际应用过程中存在视差的难题,研究多视角掘进工作面视频融合方法。传统的视频融合技术无法准确地确定煤矿综掘工作面人员、物品的位置及大小。为了得到更加准确地感知煤矿综掘工作面场景,本文需要一种多视角掘进工作面视频融合方法。该方法的思路是先提取图像的特征,再利用图像特征和多视角图像匹配技术进行图像的配准和匹配,最后使用局部逼近的投影变换模型来处理视差较大的情况。(2)针对采矿工作面上机器的抖动造成安装摄像头的工作平台不稳定的问题,研究抖动自适应的视频融合方法。由于矿井工作环境的特殊性,采矿工作面上机器的抖动会引起所成图像含有运动模糊。本文提出针对动态视频序列的实时视频融合算法,主要由视频登记和视频融合两个部分组成。视频登记的目的是估计图像之间的相对几何变换,采用的技术手段是从每个视频每帧图像中提取出特征点进行匹配,然后每隔一段时间就对图像中的特征进行提取,尽可能地避免或抑制由相机平移或抖动带来的影响。同时在图像融合阶段,结合相应的图像变换模型,避免图像融合后出现扭曲现象。(3)针对视频融合算法复杂度高的问题,研究快速工作面视频融合方法。现阶段的全景视频融合系统在对图像进行快速融合的过程中往往存在着图像错位和鬼影的问题,同时矿井中光线弱且存在大量噪声对全景融合系统的性能提出新的挑战。为了有效地解决视频图像融合实时性差的问题,本文利用图形处理单元(GPU)结合统一计算设备架构(CUDA)来实现视频图像的快速融合。在以上研究工作的基础上,针对赵家寨安全生产的需要,本文设计一套综掘工作面动态视频图像融合系统。该系统可以实现视频图像清晰化处理、综掘工作面动态视频图像融合、综掘工作面动态视频查看及存储功能。所设计的综掘工作面动态视频图像融合系统应用在煤矿开采现场,产生很好的安全效益、经济效益和社会效益。