基于Web的自然图像轻量级识别与追踪

来源 :北京邮电大学 | 被引量 : 0次 | 上传用户:Fzz
下载到本地 , 更方便阅读
声明 : 本文档内容版权归属内容提供方 , 如果您对本文有版权争议 , 可与客服联系进行内容授权或下架
论文部分内容阅读
随着AR服务逐渐渗透进生活的方方面面,AR在众多领域带给人们前所未有的生活体验与视觉震撼。运行在浏览器端的WebAR,使用户通过访问网页便可体验到AR应用,与以APP为载体的传统AR相比,具有轻量级、跨平台、易传播等优势。在WebAR的运行过程中,识别追踪和渲染交互是同时进行的,由于AR算法逻辑复杂、JavaScript语言运行效率不高、浏览器性能限制等问题,导致传统方案实现在网络平台上的AR应用存在很大的局限性。目前在浏览器上运行的AR应用,大多仅能对强标记物进行高帧率追踪以及姿态估计;而针对自然图像的追踪过程,往往会出现帧率过低、模型抖动等问题。如何给用户带来更丰富、更流畅的体验成为目前WebAR的一大难题。本论文的研究方向是在前端浏览器上实现轻量级、高性能的AR系统。在实现对自然图像进行追踪,对模型进行位姿绑定等AR功能的同时,保证系统在浏览器上以较高帧率运行,为用户带来流畅的视觉体验。利用WebAssembly技术对OpenCV库进行轻量化定制,仅将系统所需功能接口封装编译成WASM模块,使系统能够以字节码原生速度在网络前端轻量级运行,提高运行效率;添加专门的抖动优化模块,在利用L-K光流法作为跟踪器来增强系统稳定性的基础上,采用加权最小二乘法与卡尔曼滤波结合的方案,对最小二乘利用粒子滤波进行改进,得到图像间更加稳定的位姿数据,并通过卡尔曼滤波进一步过渡补偿,降低卡顿;针对AR系统增加其它拓展模块,用户可任意选中某一模型进行交互,增强模型与用户间的互动,丰富应用场景。为验证上述方案的有效性,本文设计了若干相关实验,对系统功能模块进行测试;并通过对比传统方案在相同条件下的实验数据,分析本文系统在性能表现上的提升。结果表明,本方案不仅成功在浏览器上实现AR追踪、姿态估计等功能,在性能方面同样达到了低时延、高帧率、实时性等要求。
其他文献
现今社会生活中出现越来越多因药物存放不当造成的药物浪费以及因错服和未按时服用药物造成的健康问题。本设计基于Android系统的手机APP设置语音播报、药物分类存放与检测、
巫山县位于重庆市东部,处三峡库区腹心,是国家级重点生态功能区和长江上游重要生态屏障。本文在系统分析巫山县城市周边生态系统现状和存在的问题基础上,从景观生态学和生态
目的研究姜黄素单用及联合STI571对K562细胞增殖与凋亡的影响,及其对组蛋白去乙酰化酶8(histone deacetylase8,HDACs)的作用,探讨其克服STI571耐药的可能机制。方法四唑盐(MTT)比色
校园景观对大学的教学、生活和人文素质培养会产生非常重要的影响。本文分析了校园景观在服务教学、生态、教育、满足学生空间需求等方面的特点、人性化校园景观设计影响因素
在实地调查和查阅文献资料基础上,提出牛背梁自然保护区主要害虫有15种、偶尔危害者有9种,其中13种在全国范围内属于危险性害虫;主要害虫中,落叶松叶蜂和华山松大小蠹危害性
2015年河南省中招历史A卷符合课标的考查范围,难易梯度适当,试卷图文并茂,注重考查学生的基础知识和基本技能,题型没有改变,风格在继承以往的基础上又有所创新,难度比2014年略有提
水资源是维系人类正常生产生活所必不可少的资源,水资源短缺将会严重制约地区经济、社会的发展。文章以太原市的水资源承载力作为研究对象,选取地区生产总值、固定资产投资额
办公室是反映企业特色和形象的载体,其装修设计的好坏直接影响着办公人员的工作积极性与工作效益。文章通过对办公空间的功能布局、光环境、色彩、办公家具和软装配饰角度的