基于双目视觉的三维语义地图构建

来源 :哈尔滨工业大学 | 被引量 : 0次 | 上传用户:ok695304259
下载到本地 , 更方便阅读
声明 : 本文档内容版权归属内容提供方 , 如果您对本文有版权争议 , 可与客服联系进行内容授权或下架
论文部分内容阅读
近年来,随着计算机硬件水平的提高和人工智能技术的发展,智能机器人在多种场景中得到应用,如工业机器人、扫地机器人等。对环境的感知与理解是智能机器人进行自主探索、行为决策、人机交互等任务的基础。机器人一般通过激光雷达、摄像机等传感器捕捉周边环境信息,使用算法进行分析,最后实现对环境的理解。如何利用图像中视觉数据使机器人拟人化地感知环境且进行决策是计算机视觉领域中热门的研究问题,针对这个问题,本文提出了结合双目视觉SLAM技术与语义分割技术的三维语义地图构建方法,使智能机器人可以根据相机图片构建三维语义地图,帮助其更好地理解环境信息,更智能化地进行自主工作。本文以基于双目视觉信息的三维语义地图构建方法为研究目标,首先对语义分割技术进行研究,针对传统语义分割神经网络模型在分割效率和精度方面存在的不足,分析了高效神经网络的设计方法。结合分解卷积、残差连接、卷积通道重排序和多尺度膨胀卷积的方法设计了网络卷积单元,利用多尺度金字塔级联结构构建基于注意力机制的解码器,组成实时语义分割神经网络模型。通过实验对比分析,证明了该语义分割网络在参数量、分割精度和运行速度上都有较好的表现,在语义分割任务的精度要求和速度要求之间取得了较好的平衡。在三维重建技术研究中,本文分析了不同三维重建方法在不同场景下的应用范围,选择了适合在室外环境下进行定位与建图的SLAM算法进行实时三维重建。使用实时的语义分割神经网络和深度估计神经网络提供语义信息和深度信息,结合SLAM提供的位姿信息提取超像素,以面元模型进行表面建模,完成了实时三维语义地图构建方法设计。实验部分将本文提出的三维语义地图构建方法在KITTI数据集上和校园实际数据上进行应用,构建了对应场景的三维语义地图,证明了本方法的高效性和可行性。
其他文献
互联网和多媒体技术的快速发展,产生了大量不同模态的多媒体数据,跨模态检索成为信息检索领域的研究热点。跨模态哈希方法可以有效地为不同模态的数据建立比较关系,通过将数
国无德不兴,人无德不立。自党的十八大以来,以习近平总书记为核心的党中央高度重视道德模范的作用,强调要在全社会广泛宣传道德模范的先进事迹。道德榜样以其特有的人格感召
喷雾施药是林果业防治病虫害的主要方式。传统的喷雾机普遍采用喷淋连续作业方式,不仅浪费农药而且污染环境,同时危害农民健康。为了促进农药减施增效,降低劳动强度,本文研究
半挂车支承装置,俗称“支腿”,是安装于半挂车车架前端左右两侧,用以实现牵引车与半挂车脱挂和接挂,并保证半挂车在与牵引车脱挂后能够独立保持稳定的装置,是半挂车重要的零部件之一。随着国家大力发展货运挂车的甩挂运输、统一配送的先进物流组织模式,实现降低运输成本、提高运输效率、节省能源、减少排放的目的,作为实现甩挂运输的关键零部件之一,半挂车支承装置能否安全、可靠、省力、快速地发挥作用是实现甩挂运输的重要
随着5G时代的来临,信息传输量呈爆炸式的增长。当今社会对传输容量大、成本低的光纤通信系统的需求与日俱增。得益于密集波分复用技术(DWDM)的出现与发展,波长可调谐的激光器
科技的发展与人们的需求关系密切,科技的发展不断满足人们的需求,而人们的需求也在推动科技的发展。由于前两代半导体材料禁带宽度窄,波长不可调节、输出功率低,无法满足人们
2型糖尿病(Type 2 diabetes mellitus,T2DM)患者日益增多,各种并发症备受关注,骨骼正在成为2型糖尿病并发症的靶器官。2型糖尿病患者是骨质疏松症(osteoporosis,OP)的好发人群,骨折的危险性升高。但2型糖尿病发生骨质疏松的机制目前尚不明确。β-arrestin2是具有多种功能的衔接蛋白,可以调节大量的细胞功能,对糖尿病的发生及骨代谢均具有一定影响。目的:探讨2
研究目的:骨髓增生异常综合征(Myelodysplastic Syndrome,MDS)是起源于造血干细胞的一组异质性髓系克隆性疾病,特点是髓系细胞分化及发育异常,表现为无效造血、难治性血细胞减少、造血功能衰竭,高风险向急性髓系白血病(Acute Myeloid Leukemia,AML)转化。MDS是65岁以上成人获得性骨髓衰竭的最常见原因。MDS的发病机制十分复杂,迄今尚不完全明确。MDS往往
研究背景:阿尔兹海默病(Alzheimer’s disease,AD)是一种老年人群中高发的神经退行性疾病,尽管其具体发病机制尚不明确。但众多研究证据表明,神经炎症在AD神经元退变损伤进程
随着科技发展的突飞猛进,人们可以用无线电子设备借助互联网获取图像、音频等数字产品,但是,随之产生的数字产品安全也成为了版权持有者亟待解决的问题。在信息安全领域,数字