基于深度学习的三维点云语义分割技术研究

来源 :电子科技大学 | 被引量 : 0次 | 上传用户:ac8297090
下载到本地 , 更方便阅读
声明 : 本文档内容版权归属内容提供方 , 如果您对本文有版权争议 , 可与客服联系进行内容授权或下架
论文部分内容阅读
三维点云语义分割是将点云中的每个点按照各自的类别进行语义的划分,对同一类别的点进行相同的标注。随着三维数据获取的难度变小,基于三维数据的技术开始逐渐发展,也已经开始应用在自动驾驶、智能机器人、遥感和医疗等领域中。点云语义分割算法是三维点云处理的重要方向之一,传统的点云分割方法精度不高,因此,本论文主要研究的内容为基于深度学习的三维点云语义分割,使用的基础网络为PointNet++,并对其从局部空间特征构建和网络结构等方向进行改进。具体的主要工作成果如下:(1)在深入研究PointNet++网络之后,对其在局部空间聚合特征的方法进行完善,重新设计了一种基于点云多类特征的信息编码增强结构SG-PointNet++。针对原始的PointNet++网络只利用了点的坐标差作为特征聚合的问题,论文通过添加点与中心点的原始坐标和欧式距离等信息,与坐标差共同进行局部空间的特征聚合的方法来解决,并构建了一个局部空间几何信息编码增强的GEO-PointNet++网络。另外,针对编码过程对点的附加信息处理不完善的问题,本论文采用了将点的附加特征和几何特征分开编码的方式来改进,设计了SEP-PointNet层,并完成了SP-PointNet++网络的构建。论文采用了S3DIS标准数据集来进行网络改进有效性的验证。结果显示,SG-PointNet++网络在S3DIS数据集的Area5所有房间的总体精度为82.4%,相对于PointNet++提高了1.3%,对于各类的平均交并比mIoU,SG-PointNet++网络的mIoU值为51.96%,相对于PointNet++增加了2.57%。(2)结合SP-PointNet++网络,在研究了基于深度学习的三维点云语义分割网络的结构之后,设计了一种网络结构更优化、网络模型性能更好的DSGD-PointNet++三维点云语义分割网络。针对网络深度较浅从而导致点的感受野较小的问题,采用了加深网络层数的方法来解决,并引入残差结构,设计了Deep-PointNet++网络。针对网络参数多的问题,采用了加入dropout网络层来防止网络模型过拟合,提出了DD-PointNet++网络,并结合之前在特征编码模块的改进,最终构建了DSGD-PointNet++网络。论文采用了S3DIS标准数据集来进行实验,验证DSGD-PointNet++网络的三维点云语义分割性能。实验结果显示,改进后的DD-PointNet++网络在S3DIS数据集的Area5所有房间的总体精度为82.1%,相对于PointNet++提高了1.0%,mIoU值为51.89%,相对于PointNet++增加了2.5%。结合在网络特征编码过程改进的SG-PointNet++网络,构建的DSGD-PointNet++网络,在S3DIS数据集的Area5所有房间的点云分割的结果如下。其总体精度为83.0%,相对于PointNet++提高了1.9%,mIoU值为53.5%,相对于PointNet++增加了4.11%。针对质量较好的点云,DSGD-PointNet++网络的OA值为95.9%,相对于原始的PointNet++网络提高了8.4%,mIoU值为86.13%,相对于PointNet++提高了14.51%。
其他文献
编队是多智能体的一种重要协同行为。研究复杂环境下的多智能体编队控制具有重要的理论意义和应用价值。为了得到一种面向室内复杂环境下的编队控制方法,本文采用UWB定位系统对移动机器人进行室内定位,设计并优化了一种基于相对位置信息的编队控制方法,并搭建了室内编队控制系统平台进行实验验证。论文主要内容如下:1)设计了一种基于相对位置信息和虚拟领航者的编队控制方法。利用期望队形数据和实际定位数据的差值生成虚拟
多机器人之间的合作与协调可以完成单机器人无法胜任的高度复杂任务,对于实现在分布式空间环境中协同完成任务具有重大意义,可以极大地促进机器人技术的发展。多机器人编队一直是多机器人系统控制的重要内容,室内环境下的多机器人编队研究具有重要价值,但也存在一系列问题。在控制方法方面,传统的多机器人编队方法主要为集中式控制与分布式控制两类方法,集中式控制对上位机性能要求较高,多机器人本身无法进行运动控制,系统整
目前,利用内窥镜在微创手术中获取病灶区域的深度信息还面临诸多挑战,由内窥镜获取的二维图像的特点使得手术机器人难以准确恢复病灶部位的三维空间结构,进而限制了手术机器人进一步向智能化发展。针对这一障碍,本论文研究了基于深度学习的双目内窥镜图像重建技术,主要内容如下:1、本文针对目前常用的基于深度学习的视差估计网络在内窥镜图像上重建精度低的问题,并就内窥镜图像少纹理、易被遮挡等问题设计了一种编码器-解码
随着工业机器人的更新换代,焊接方式已经由人工焊接转变成自动焊接,在车辆制造业和造船业等领域应用十分广泛。事实上,每一套焊接系统都是针对某一特定的焊接过程而设计。本文根据某企业C64K型敞车返修焊接过程中出现的车体尺寸大,焊接范围广等一系列问题设计了一套数控智能龙门割焊系统。同时,采用直线插补原理进行示教再现,从而实现焊缝跟踪。此外,针对焊接过程中的部分焊缝间隙较大、高低错边而导致的熄弧现象,设计了
仿生技术、显示技术和物联网产业等的快速发展,推动了人们对高性能、先进电子皮肤传感器的需求。电容型压力传感器由于具有响应速度快、稳定性好、非接触式感应等类皮肤行为,成为国内外研究的热点。但是传统的平面结构的介电层具有很大的粘弹性,迟滞严重,影响了器件性能。为了解决这一问题,研究人员对器件的设计策略进行了大量的探索。目前提高电容型压力传感器性能的策略类型主要分为三种:一是选择模量较低、介电性能好的材料
目前,外骨骼机器人已经在成人康复领域有了一定规模的应用,但在脑瘫等儿童康复领域还未形成大范围的应用规模,市面上亦缺乏成熟的儿童外骨骼机器人,有关外骨骼机器人对儿童运动能力的研究也很初步,缺少外骨骼机器人对儿童步态的影响及运动功能评估研究。因此,本论文针对该问题,对AIDER儿童外骨骼机器人步行状态下的运动功能及步态影响进行了研究,以验证儿童外骨骼机器人对于儿童地面步态训练是否是可行的,步态生物力学
近些年随着深度学习的快速发展,基于深度学习的算法被广泛运用于二维目标检测和姿态估计中。在实际应用场景下,比如机械臂抓取、自动驾驶以及AR领域中,目标物体往往处在复杂的环境中,容易受到遮挡。针对遮挡场景下的物体6D姿态估计研究具有十分广阔的空间和重要的研究价值。因此本文开展基于深度学习的被遮物体姿态估计的研究,主要包括三部分:受遮挡情况下物体姿态估计问题研究,工业场景下物体自遮挡姿态估计问题研究,多
近年来,图神经网络在社交网络、推荐系统、分子化学和知识图谱等领域取得了显著的成果。一方面,它解决了深度学习方法难以处理非欧式空间数据的问题,另一方面,它提供了一种对非规则数据提取特征的方法。图结构数据是生活中广泛存在的一种数据结构,与欧氏空间的数据不同,图结构可以更好的反映节点之间的联系。随着图神经网络的迅速发展,许多针对图结构数据的研究也如雨后春笋般涌现,这些研究主要包括节点表示、链接预测和图学
扭摆滑动定向作业过程中,最常见的问题是“托压”,来自于固定的钻具与井壁之间的摩擦力。这一问题可通过扭矩摇摆技术解决,即向钻具施加正、反向扭矩,化静摩擦力为动摩擦力,以减少钻具与井壁间的作用力。目前由于缺乏相关理论支撑,在滑动定向作业过程中为使工具面转动至目标值,仍需通过扭摆系统人工对正、反向扭矩值进行调整,该方式依赖于工程师个人经验,各井的控制效果因人而异,参差不齐,作业效率较低。针对以上情况,依
路径规划一直是热门的话题和研究方向,如何及时捕获和提前预测车辆行驶时间的动态变化是解决路径规划的难点及重点,本文提出的算法能够在保证计算速度的同时,提高路径规划的准确度。本文从以下几个方向研究路径规划问题:如何最小化路径行驶时间的均值和标准偏差的(加权)线性组合来解决可靠最短路。在合理假设基础交通网络的行驶时间遵循多元高斯分布的情况下,提出了一种高斯过程路径规划(GP3)算法来计算先验最优路径作为