论文部分内容阅读
基于图像的绘制技术是近几年兴起的一种新的虚拟场景绘制策略,它已成为当前计算机图形学界的一个研究热点。基于图像的绘制技术结合了计算机图形学、计算机视觉、图像处理、摄影测量学等许多学科的理论和成果,用真实的图像来代替传统的几何建模,使绘制的图像真实自然、绘制的速度不依赖于场景的复杂度。本文对该领域中新视点图像生成和其相关技术进行了研究,主要包括特征的检测和提取、基于点特征和线特征的宽基线(wide baseline)图像匹配、基于轮廓对应的任意新视点图像生成等。 特征检测是图像处理中的一项基本技术。根据匹配和新视点图像生成的需求,特征检测方法需要特征定位的精度较高,能同时检测出角点、边缘等不同特征等。本文研究了基于相位一致的特征检测技术,从频域分析图像灰度的突变位置。讨论了不同方向的多尺度下相位一致值计算,并研究了一种用矩理论对各方向相位一致数据进行综合的方法,可有效的区分和提取边缘和角点特征。 现有虚拟视点图像生成中初始匹配点的选取,通常是直接在图像上由用户交互方式进行或由摄像机标定得到。交互方式容易受人为主观操作因素和图像分辨率的影响,使对应匹配点的选取产生误差,并且使视图生成过程需人工干预,不能实现完全的自动化,给实用化带来很大的困难;摄像机的标定需要采集图像摄像机的一些先验知识,限制了虚拟视点图像生成方法的适用范围。本文提出宽基线图像匹配方法,分别是基于点特征的匹配和基于线特征的匹配,将其应用到视图生成中,从而实现了虚拟视点图像的自动生成。根据欲匹配源图像间几何变形的不同,提出了两种点特征邻域的选取和匹配原理方法。当图像之间的尺度差异较小时,例如,在虚拟漫游中摄像机环绕景物运动时采集的序列图像,提出一种基于仿射不变量的点特征区域提取和匹配方法,能适应大的视点变化和光照条件的变迁。该方法以图像中颜色的局部极值点为种子点,过种子点作射线,将沿各射线上颜色变化为最大的点连线围成区域,取该区域的椭圆拟合作为特征区域,该特征区域具有仿射不变性。当图像之间尺度相差较悬殊时,可通过多尺度分析,在三维尺度空间选取颜色值为不连续突变的角点作种子点,特征区域是以种子点为圆心的邻域。对已选出的局域特征区域,逐步消除几何变换和光照变换对图像区域的影响,构造特征向量来表征该区域内颜色分布,通过特征向量的比较来确定特征区域的匹配。实验表明基于上述点特征区域的匹配方法具有较强的鲁棒性,可应用于宽基线图像的匹配。 基于点特征的匹配适用于纹理信息较丰富的图像,对于纹理信息较少的图像,为获得足够多的匹配点,还需要基于线特征的匹配。相对于基于点特征的宽基线图像匹配,线特征在宽基线图像的匹配应用中研究较少,线的匹配提供的图像间信息较少,但我们可以通过匹配直线的端点、交点,由匹配的直线段得到匹配的点。本文提出的线特征匹配方法通过基于相位一致的边缘检测技术,检测出图像边缘,提取组成边缘直线段链,由三条相邻直线段构成待匹配基元。检测组成基元的直线段间相对位置关系和相互连接方式,得到基元的不变量描述,以此作为匹配准则确定基元匹配,各基元的匹配关系构成图像间直线段的相似矩阵,通过相似矩阵的值确定全图像中直线段间的潜在匹配。并根据所有潜在匹配中直线段间的相对位置关系,提出了一种直线段匹配的全局几何约束,剔除错误匹配,得到了较好的直线段匹配效果。该算法可应用于宽基线图像的匹配。大连理工大学博士学位论文 由已知图像合成新视点的图像是基于图像的绘制中的一项基本技术,它用具有高度真实感的图像来表示虚拟场景。视图合成工作是在两幅同一目标景物,不同视点的图像之间合成一系列连续的期间过渡图像,其中要求合成视图应该具有三维真实感,如同虚拟摄像机所采集的图像。本文提出一种基于摄像机横向和纵向移动采集的图像合成新视点图像的方法,该方法在合成图像中优先保证轮廓对应准确,从而使合成图像轮廓清晰。对通过摄像机分别作横向和纵向运动采集的四幅图像,本文提出的新视点图像生成方法,可以实现在上述四幅图像视点围成的四边形中任意新视点图像。对于一幅图像来说,图像中形体轮廓线和区域分界线具有特殊的意义。一方面,轮廓边界是重要的视觉感知线索。图像中像素颜色值的变化,在一个区域内往往保持比较稳定的模式,在边界处则会发生急剧的突变。人类视觉的特点则是对颜色和亮度的变化最为敏感。在图像处理中,轮廓相对于其它图像信息也易于识别和提取。另一方面人类正是主要通过物体的轮廓来区别和认识物体的,如果生成图像的轮廓质量高,则生成的图像整体质量必定也高。实际上,质量不高的图像其最明显的外在特征就是边缘轮廓线模糊不清。因此,本文提出一种改进的基于轮廓对应的视图合成方法,首先以组成轮廓的直线段间相对位置和方向得到直线段间的正确对应,再由匹配的直线段和极线几何约束得到匹配的轮廓点,保证了轮廓对应的准确性,使合成图像轮廓清晰。再以轮廓为界限制其它像素的对应,减少错误匹配的几率,从而使生成图像出现“灰影”的概率减少,图像质量较好。对于摄像机纵向运动采集的图像,提出了一种确定远视?