【摘 要】
:
近年来,智能机器人技术发展迅速,已应用于诸多领域。部分机器人在原地就可完成作业任务,如生产线上的工业机器人,部分机器人则需要在运动中完成作业任务。自主运动智能机器人需要实时获取位置与姿势(简称位姿)变化信息来控制其自身的运动轨迹。视觉里程计就是运动智能机器人获取位姿信息的关键技术。所谓视觉里程计是利用摄像头获取的图像帧来估计机器人运动中的位姿变化信息,是视觉实时定位与地图构建(VSLAM)系统的关
论文部分内容阅读
近年来,智能机器人技术发展迅速,已应用于诸多领域。部分机器人在原地就可完成作业任务,如生产线上的工业机器人,部分机器人则需要在运动中完成作业任务。自主运动智能机器人需要实时获取位置与姿势(简称位姿)变化信息来控制其自身的运动轨迹。视觉里程计就是运动智能机器人获取位姿信息的关键技术。所谓视觉里程计是利用摄像头获取的图像帧来估计机器人运动中的位姿变化信息,是视觉实时定位与地图构建(VSLAM)系统的关键构成模块。针对视觉里程计,本文主要研究内容和研究成果如下:(1)现有的视觉里程计算法中利用图像信息的方式可分为:特征点法、直接法和半直接法三种。当应用场景为室外结构化环境,且存在光照对比差异较大等不利因素时,利用上述三种方式获得的位姿变化信息都不够精准。而在上述环境中,图像边缘线特征信息相对更加丰富、稳定,且线特征中还包含了空间结构信息。因此,本文利用图像边缘线特征信息开展视觉里程计研究。(2)鉴于卷积神经网络(CNN)具有较好的特征提取及特征学习能力,本文构建了卷积神经网络模型,以提取图像边缘的线特征信息。在此基础上,鉴于深度学习算法不但能够学习相机参数,而且对环境中的光照变化具有较好的鲁棒性,本文构建了基于深度学习的分类感知语义边缘检测网络(CASENet)模型,以实现按语义分类提取图像帧的边缘线特征信息。(3)基于图像帧位姿信息的时间连续性及线特征的空间结构性,本文构建了三维卷积神经网络(3DCNN)与长短时记忆网络(LSTM)相结合的编码模型,将上述(2)中按语义分类提取的图像帧边缘线特征信息进行3DCNN+LSTM编码,以实现边缘线特征与空间结构信息的高纬度特征提取。在此基础上,本文构建了基于循环神经网络的视觉定位系统模型,以实现基于边缘线特征的位姿估计。(4)利用KITTI数据集,对本文所提出的基于深度学习算法的视觉里程计进行了性能测试。测试结果表明,在室外结构化环境中,即使存在光照对比差异较大等不利因素情况下,本文提出的基于深度学习算法的视觉里程计仍具有较强的鲁棒性,能够满足VSLAM系统中对位姿估的基本性能要求。
其他文献
目的 探讨双镜联合(腹腔镜+胆道镜)与ERCP治疗老年单纯性胆总管结石的疗效。方法回顾分析我院2016年1月至2020年12月收治的符合入选标准的高龄(年龄≥75岁)单纯性胆总管结石患者59例,其中32例行腹腔镜胆总管切开取石(腹腔镜组,A组),29例行ERCP术(ERCP组,B组)。比较两组的术前一般资料情况(如性别、年龄、胆总管直径、结石直径、胆总管结石单发/多发、术前胆源性胰腺炎、胆囊切除/
目的使用超声检测中枢性性早熟、其他性早熟及正常女童子宫、卵巢、乳腺变化情况,并与临床其它因素比较,为临床女童性早熟诊断及鉴别诊断中的提供更为客观、准确的超声参数范围,探讨超声技术超声参数在无创性评价女童性早熟诊断中的诊断效能。研究对象及方法1、对象:2017年4月至2020年3月在我院就诊,家长或监护人诉身高较同龄人矮小,或诉双侧乳腺较大,抽取静脉血行E2、LH、FSH等雌激素项目检查,在家长或监
研究背景:越来越多的研究证实尿毒症患者死亡的重要原因为心血管事件。同型半胱氨酸(Homocysteine,Hcy)是慢性肾脏病(chronic kidney disease,CKD)患者心血管疾病(cardiovascular disease,CVD)的非传统危险因素之一,是终末期肾病患者CVD患病率和死亡率的独立预测因子。血清胱抑素C(cystatin C,Cys-C)是一种新的肾功能标志物,已
目的探讨右美托咪定(dexmedetomidine DEX)对依托咪酯诱导全麻气管插管时心血管反应及肌阵挛的影响。方法选取择期在我单位行全身麻醉手术的美国麻醉医师协会(ASA)Ⅰ~Ⅱ级的患者90例,随机分为三组:对照组(C组)、DEX0.5ug/kg组(D1组)和DEX0.7ug/kg(D2组),每组30例患者。观察三组患者用药前(T0)--即基础値、麻醉诱导前(T1)、插入气管导管前(T2)、插
研究背景自体皮移植是临床治疗烧伤、大面积皮肤撕脱伤等皮肤创伤最有效的方法。目前临床趋向采用微粒皮移植,最大限度地利用表皮干细胞在创面扩增以修复创面,尽管如此,自体皮源不足的问题仍严重影响大面积皮肤创面的治疗,是再生医学急需解决的瓶颈问题。近年来,随着对皮肤附属器研究的深入,研究者发现毛囊才是皮肤最大的干细胞库[1-3],提示位于毛囊上段的隆突部干细胞具有运用于创面修复的巨大临床应用前景[4]。临床
计算机系统结构是计算机相关研究的传统领域。由于该领域直接面向计算机的底层设计,研究者往往需要很长的周期去学习相关知识和工具。计算机的底层设计千差万别,因此相关工具需要对计算机系统进行良好抽象以增加其通用性和可定制性。各种商业化的处理器核心虽然功能强大,但是由于其商品的封闭属性,不能方便将其用于科研和教学工作,因此许多学者和团队相继开发了各种模拟器、仿真器以及处理器核心。我国在该领域的研究虽然起步较
鱼肉品质受多种因素影响,除品种和遗传因素等先天因素之外,养殖环境是影响鱼肉品质的主要因素之一。温度作为一种重要的环境因子,在鱼类的生长和生理活动中发挥重要作用,然而温度是否会影响鱼类肌肉品质及其作用机制目前尚不清楚。本实验以模式生物斑马鱼(Danio rerio)为研究对象,设置了18℃(低温)、28℃(最适温度)和34℃(高温)三个温度组,每组3个重复,开展7周的养殖实验。通过分析不同温度下鱼体
研究目的通过测定血栓形成的相关指标:血栓前体蛋白(Tp P)、P选择素(s P)、D-二聚体(D-D)、组织型纤溶酶原激活物(t-PA)、组织纤溶酶原激活物抑制因子-1(PAI-1)、血管性血友病因子(v WF)、一氧化氮(NO),分析首发精神分裂症患者未用药组治疗前后、病程≥5年组以及健康对照组之间的差异,阐明精神分裂症疾病进程及抗精神病药物治疗对血栓形成指标的影响。方法选取2019年5月至20
机器人的应用已经迅速扩展到娱乐、家庭、工业、医疗等多个领域。随着集成电路、5G通信、嵌入式等相关技术的进步,人们对于机器人的需求已经不再局限于简单的控制,拥有良好的人机交互能力是机器人发展的核心方向。基于高可靠性、低成本的机器人控制系统,并融合视觉、听觉等感知技术,来提高机器人的智能交互能力已成为近年来的研究热点。在小型人形机器人领域,低成本的控制器和开源、移植性高、可裁剪性高的操作系统组成的控制
群体机器人系统的目标搜索和围捕任务作为智能机器人领域一个典型的复杂问题,近年来越来越受到学术界的关注。单体机器人处理复杂任务的能力通常被认为是有限的,而群体机器人系统可以通过局部交互的方式协作完成复杂任务。因此,与单体机器人系统相比,群体机器人系统具有适应性强、扩展性强、可靠性高等优点。类似与自然界生物群体中的集群现象,群体机器人可以通过生成与转换整个集群的形态来实现穿越窄道、货物运输、目标的搜索