室内移动机器人定位与语义点云重建方法研究

来源 :东南大学 | 被引量 : 0次 | 上传用户:barbaraxj
下载到本地 , 更方便阅读
声明 : 本文档内容版权归属内容提供方 , 如果您对本文有版权争议 , 可与客服联系进行内容授权或下架
论文部分内容阅读
同步定位与地图构建技术是室内智能移动机器人的关键技术之一,基于视觉惯性数据融合的组合导航定位与语义重建技术是当前智能移动机器人领域的重点研究方向。为满足当前移动机器人定位和对环境的感知等需求,针对惯性导航系统定位误差会随着时间漂移、视觉导航系统易受环境因素影响、传统的点云三维重建缺乏对场景的理解等一系列问题开展关于视觉惯性数据紧组合定位和语义重建技术研究,旨在解决室内智能移动机器人定位和三维点云重建问题。本文通过双目相机结合惯性测量单元完成室内场景下的机器人定位与语义点云重建算法。本文的主要研究工作内容如下:(1)针对室内智能移动机器人定位问题,本文使用了基于双目相机和惯性导航结合的组合导航定位算法,并给出了基于扩展卡尔曼滤波器的滤波式融合定位算法和基于因子图优化的优化式融合定位算法。(2)针对经典基于扩展卡尔曼滤波器的视觉惯性组合导航算法,分析了该算法存在的数值稳定性等问题,并提出了基于IMU预积分封闭解的IMU数据预处理算法,该算法通过对IMU预积分求解封闭解取代传统的中值积分解,能有效地提高算法的精度。本文还提出了基于逆深度参数化的相机观测方程表示法,该算法通过将相机观测方程中空间三维点坐标参数化,能有效解决当相机坐标系下三维空间点z轴趋近于0时存在的奇异性问题,提高了算法的数值稳定性,并通过数据集仿真实验验证了该算法相对于经典算法的稳定性和性能优势。(3)针对传统基于非线性优化的视觉惯性组合导航算法,阐述了因子图理论以及优化函数的推导,通过数据集实验验证了因子图优化算法相对于传统优化算法在定位精度上的优势,并通过计算算法的CPU消耗和内存消耗,验证了因子图优化算法在性能和系统消耗上的优势。(4)针对室内场景语义点云三维重建算法,本文通过结合Mask R-CNN语义分割网络和点云体素聚类算法对场景进行点云三维重建。算法首先通过深度图像和RGB图像以及相机的位姿构建场景的三维点云,同时对RGB图像进行语义分割,获得图像的语义标签,然后将三维点云通过超体素聚类的方式对点云进行分割,最后将二维语义标签映射到三维点云中,获得全局一致的语义点云重建。(5)搭建了智能移动机器人样机实验平台,并且通过样机软硬件实现了基于IMU预积分封闭解的视觉惯性组合定位算法和基于因子图优化的视觉惯性组合定位算法。基于样机平台,设计了多组定位实验验证了本文算法的有效性和效果,包括室内直线运动实验、绝对轨迹误差定位实验、曲线实验和长时间长距离定位实验。并且通过实物相机录制数据,通过两种不同的真实场景验证了本文语义点云重建算法的有效性。
其他文献
近年来随着我国城市建设高速发展,毗邻水域的特大城市跨江、跨海的需求显著,大跨深水域桥梁应运而生。大型沉井基础作为一种常见的深埋基础型式,被广泛用作大跨度桥梁主墩和锚碇基础。大型陆地岸边沉井下沉初期常采用工效较高的降排水施工方式,但该阶段沉井结构刚度低、入土深度浅,易出现结构性开裂、沉井倾斜、拒沉、突沉等异常现象,是沉井下沉的动态控制的关键阶段。本文依托于南京仙新路北锚碇沉井基础下沉项目,通过理论研
人体运动建模与合成涉及两个概念,建模与合成,运动建模是从环境中感知人体运动;运动合成是计算机合成逼真的人体运动;二者相辅相成,在教育、医疗、安防、娱乐等方面都有重要作用,是计算机视觉与图形学前沿研究热点,主要面临两大挑战:一是建模准确、稳定的人体运动信息,二是合成逼真、可控的运动。本文围绕人体运动,针对三类问题:一是运动建模中的姿态估计,二是运动合成中的舞蹈合成,三是运动合成中的运动重定向,提出了
自然度在生态学、自然资源学领域是重要的评价指标,常用于判断自然生态系统退化或受干扰的程度,分析和规划自然生态保护措施。本文以南岭国家公园为研究对象,首先应用层次分析法构和综合指数法,结合GIS、RS软件对南岭国家公园自然度进行定量评价,根据自然度评价结果划分南岭国家公园自然度等级;其次基于自然度的空间分布和南岭国家公园基本功能,提出空间功能分区方案,明确各分区的空间功能、空间位置和规模、空间资源特
蚯蚓在医药、膳食和饲料等方面具有重要作用,因其利润可观,养殖技术简单等原因养殖规模不断扩大,成为农民致富增收的重要途径。河北省作为蚯蚓养殖大省,面临激烈市场竞争,提高养殖蚯蚓质量势在必行。该研究利用SWOT分析法明确河北省蚯蚓养殖产业现状和限制因素,有针对性地提出意见和建议,以期促进河北省蚯蚓养殖产业可持续发展。
从肝治肺是根据肝肺之间的生理病理相关性,通过调治肝脏来达到治疗肺病的方法。从肝治肺治法的实现离不开肝肺与气血运行的相关性。女性肺癌的病因病机与肝肺两脏息息相关,故可从肝治肺。基于气血运行与肝肺生理病理相关性,论述女性肺癌的病因病机及从肝治肺治疗女性肺癌的理论与临床实践,为女性肺癌的临床治疗提供新的思路。
孤立性肺结节属肺部结节性微小病变,多为单发,有良性与恶性之分,但患者一般无明显症状,定性诊断较困难,随着低剂量螺旋CT普及和肺癌筛查项目开展,人群中检出率显著上升。中医尚无相关诊疗指南,临床治疗主要基于医家经验。本文通过对“气有余便是火”内涵的深刻解读,从六淫化火、五志化火、脏腑火旺等方面阐述邪火的形成及其与孤立性肺结节的联系,立降气泄火、化痰祛瘀、扶其正气等法加以论治,以期为临床相关治疗提供参考
在线学习作为一种重要的学习方式,以其便捷性和灵活性,满足了信息化时代泛在学习和个性化学习的需要。时空分离的学习模式,教师不能面对面给予学生指导,低年级学生难以在视频观看期间保持长时间的专注等问题成为线上教育发展的阻碍。实时识别学生的学习状态并提供个性化的反馈和干预是保证在线学习效率的重要手段。因此,将可穿戴技术测得的生理信息与学习活动数据结合,分析和推断个人学习状态,通过即时的个性化反馈可提高在线
胰腺是人体消化系统的重要组成器官,具有外、内分泌功能。外分泌腺负责分泌胰液,用于消化糖、脂肪和蛋白质;内分泌腺由胰岛组成,通过分泌胰岛素等多种激素来调节血糖水平。在过去10年中,随着中国居民生活饮食结构的改变以及老龄人口的增长,胰腺癌导致的死亡在癌症相关死亡病例中的占比增加了9%,发病率逐年升高。胰腺癌已成为威胁国民生命健康的重大公共卫生问题。胰腺癌恶性程度极高,进展快,预后差,5年生存率不足8%
师范专业的发展不仅为教育事业提供师资数量的保障,而且关乎着教育发展水平的高低。而课堂教学作为师范专业培养最本质最核心的部分,关乎着师范专业发展的质量。2018年1月30日发布的《普通高等学校本科专业类教学质量国家标准》,首次在政策层面提出了教学质量的国家标准,明确提出“突出学生中心”的原则。为体现学生中心原则,许多高校都开展了课堂教学改革,力图将课堂的主动权交到学生的手上,提高教学质量,但学生自主
学位