基于场景理解的室内增强现实可视化研究

来源 :武汉大学 | 被引量 : 5次 | 上传用户:qq853001313
下载到本地 , 更方便阅读
声明 : 本文档内容版权归属内容提供方 , 如果您对本文有版权争议 , 可与客服联系进行内容授权或下架
论文部分内容阅读
随着智能移动设备和地理信息系统(GIS)的普及,内容丰富有效且具有真实感的空间信息显示和表达逐渐成为研究的热点。传统的空间信息媒体,如二维地图,表达内容极为有限;三维地图数据量较大,无法很好的应用于移动平台移动;都难以满足用户对空间信息可视化的日渐增长的需求。增强现实(AR)技术突破了传统地理数据的表达方式,将地理空间数据以一种动感、逼真的方式呈现出来,使用户能够更好地理解和参与到现实世界中。虽然目前对室内AR可视化技术的研究已经颇具规模,但仍然存在着许多的问题和挑战。近年来,增强现实的相关技术研究主要集中在三维注册跟踪时对相机姿态的追踪和匹配,也已经取得了一定的成果,而在相机姿态获取后的虚实融合可视化方面却相对进步缓慢。事实上,基于特征点匹配的跟踪注册仅能获取当前摄像机与真实场景的相对位置关系,但缺乏对场景的认知能力,只能保证虚拟物体出现在相应的场景中,而无法体现物体的功能性与真实场景的几何逻辑关联。高质量的虚实融合可视化需要具备对真实场景的认知和识别的能力,从而提高室内AR可视化的合理性与逻辑性。另外,AR系统应该对已有空间数据和现实进行叠加,这就需要有基本的地图数据和几何信息作为支撑,将现实元素抽象化到可视化结果中,否则将无法体现系统的实用性。而一般的参考图像并没有几何信息和属性信息,仅用来与真实场景匹配计算相机的姿态,无法为AR系统提供有价值的空间信息。针对现有室内增强现实在融合可视化和室内空间信息表达不充分等问题,本文提出一种低成本、简单、高效的室内三维模型纹理注册与更新方法,并以此为基础探索和设计了基于模型纹理图片的室内增强现实可视化模型。纹理注册方法以智能手机平台为基础,结合室内场景图片理解技术,在不需要重建其几何结构的前提下快速的更新三维模型纹理。进而,通过将这些具有现势性的纹理图像特征与真实场景进行配准,获取精确的相机追踪姿态。最终,实现将三维几何模型中的几何信息,语义信息精确显示到增强现实系统当中,同时根据室内场景理解结果提高AR融合可视化的合理性与逻辑性,对于室内位置服务的使用和扩展具有重要意义。本文的主要研究内容及创新点归纳如下:(1)总结和归纳了目前增强现实可视化的各项关键技术,具体研究了基于计算机视觉的三维注册跟踪技术,并详细探讨了其中基于自然特征的三维注册方法及工作流程,深入分析并指出现有增强现实可视化所存在的问题,为后文的推进打下基础。(2)学习并总结了现有主流的室内三维布局提取技术。通过对结构化预测概念的深入研究,探讨了基于结构化预测的室内布局提取方法。分别详细阐述了基于几何信息和基于FCN的室内三维布局提取方法,并对其中的关键技术和步骤进行了提炼。最后通过实验对比分析了基于结构化预测的室内场景布局提取方案中FCN的粗略布局估计模块对传统方法的约束效果。(3)提出一种高效、低成本的室内三维模型纹理快速更新方法,该方法以手机拍摄的图片为数据源,无需重建室内三维模型的几何结构,也无需任何专业的测量设备,仅利用手机传感器获取拍摄图片的位姿参数,进而通过室内场景理解技术提取图片空间中的三维布局结构,最后与几何模型进行坐标点匹配解算纹理坐标,实现手机图片到三维几何模型的快速纹理映射及动态更新,有效提高室内三维场景表达的真实性。(4)针对传统基于自然特征点的三维注册方法在计算出相机与真实场景的位置关系后直接开始绘制虚拟物体,缺乏对真实场景的理解而无法顾及虚拟物在真实场景中的功能性和几何逻辑性的问题。本文结合室内场景理解技术,通过场景图像的认知结果与相机姿态的共同约束,精确限制虚拟物体在现实场景中的位置,有效提高了室内AR虚实融合可视化的合理性与逻辑性。(5)提出一种基于室内三维模型纹理的增强现实可视化方法,以具有高真实感和现势性的三维几何模型纹理为参考图像,通过特征匹配,实现相机姿态的追踪与虚实融合可视化。高真实感的纹理图像不仅能够与现实场景匹配计算相机姿态,且不同于一般参考图像,纹理图像与三维模型具有天然的几何关联性,通过这种关联性可以获取到场景的几何信息和空间属性,为AR可视化提供有效的空间信息。该方法无需预先在场景中设置人工标识或对参考图像做特殊处理,简化了 AR系统的预备工作。且能够在室内场景中发生变化时,结合手机图片的纹理快速更新方法,保证AR系统三维注册的鲁棒性。
其他文献
进入21世纪以来,随着科技的迅猛发展,各国竞争日益激烈,主要体现在人才的竞争。高等学校为国家培养和选拔了大批优秀的人才,为维护社会公众利益做出了积极贡献。但人才的培养
NiTi金属间化合物除具有形状记忆性能外,还具有优异的抗空蚀、抗冲蚀性能,并应用在水轮机、螺旋浆等过流部件具有广阔的应用前景。但由于NiTi合金不宜加工,选择喷涂方法制备N
从建设监理信息资源管理的角度来讲,人们已经产生一种共识,那就是“档案资源是企业最珍贵的资产”。现在,档案资源不仅是企业最珍贵的资产,而且应该是唯一“动态的资产”。通
在市政工程项目中,新旧道路的路面拼接是施工的重要环节,其施工的技术要求相对较高,一旦路面的拼接技术不合格,就可能导致各种路面病害,致使公路的使用寿命和安全性大大减少
现行《公司法》上的股东名册制度,因为制度设计缺陷,未能发挥应有的功能。股东资格认定问题,仍是公司实务纠纷的难点。而《公司法司法解释(三)》在现行制度尚不健全的背景下,
随着世界经济的发展,钢铁冶金行业也在日新月异的发展着,对相关的设备也提出了更高、更快、更精确的要求。滚切式双边剪作为一种先进的中厚钢板精整剪切设备,其在剪切效率和剪切
公正司法的首要基础在于司法公信。司法公信力是司法职业化能够充分发挥实践作用的前提条件。司法公信力欠缺,则深刻影响着实体公正和程序公正的预期目标:不仅实体规则的司法
本文采用静态高温高压腐蚀失重实验和腐蚀电化学实验,结合SEM、EDS. XPS、XRD等微观分析手段,对自主研制的两组膨胀管用第三代TWIP钢Fe-0.21C-25Mn-5Cr-2A1-2Ni和Fe-0.21C-24
《普通高中语文课程标准(实验)》指出“高中语文课程要充分发挥其促进学生发展的独特功能,使全体高中学生获得应该具备的语文素养,并为学生的不同发展倾向提供更大的学习空间
邓中夏是中国共产党的创始者和早期领导人之一,是杰出的工人运动领袖,是最早一批接受并传播马克思列宁主义的青年思想家。在其短暂的一生中,他对工人运动的研究和实践为中国