基于三维感知技术的工业物体重建分割与定位研究

来源 :浙江大学 | 被引量 : 0次 | 上传用户:lost123321
下载到本地 , 更方便阅读
声明 : 本文档内容版权归属内容提供方 , 如果您对本文有版权争议 , 可与客服联系进行内容授权或下架
论文部分内容阅读
焊接机器人是工业中较为常用的机器人,它能够帮助人类从复杂的作业环境中解放出来,提高劳动生产率,缩短生产准备周期。在焊接生产过程中,焊接的精度受到前道工序工件加工精度,待焊接工件的摆放位置以及焊接形变等因素的影响,因此焊缝的定位是极其重要的一个环节。在焊缝的定位中,一般需要完成粗定位和精定位两次定位。焊缝粗定位是机器人进行三维感知的过程,通过感知环境确定物体的大致位置,为后续的视觉引导焊缝跟踪做好准备;焊缝的精定位则是使用图像确定焊缝的具体位置。三维重建和点云分割是焊缝粗定位中三维感知重要的技术组成,前者的精度会受到累积误差的影响,而后者常用的学习方法分割网络在点云的局部特征提取上受到不均匀采样,特征提取网络不够深等问题的影响。焊缝精定位中,目前已有的特定结构光平面视觉系统引导的焊接机器人的标定方法误差较大且存在标定时需要制作高精度的标定板。为了解决上述焊缝定位的问题,本文分别对焊缝粗定位中的三维重建、点云分割以及视觉引导精定位中机器人手眼标定进行研究,主要内容如下:1.针对稠密三维重建中累计误差带来的漂移问题,引入差异系数矫正的回环检测词袋模型进行轨迹校正,提升图像相似度计算的性能。另外,提出熵约束相机姿态选取关键帧的方法,使得相机运动越剧烈的帧更加容易选取为关键帧,从而提升回环检测的质量。2.设计了 一种点云实例分割的深度学习网络,使用resblock或denseblock的结构加深网络,在层次结构中反复聚合多尺度语义,并在网络的逆密度计算上,引入点云的数量来进行核密度函数的带宽选择。另外对同一局部点云的高维特征经过插值降维变换后和低维特征进行对齐函数的学习,使其具有相似性。通过公开数据集的部件分割以及语义场景分割的实验,验证所提出来的网络的分割精度有一定的提升。3.提出一种基于结构光平面的手眼标定方法,通过数学推导得到手眼标定矩阵的计算方法,且使用bagging的方法减小了误差。该方法无需定制高精度的标定物件,并在实际的工厂进行了焊接实验,验证了在使用bagging的方法的手眼标定能够将三轴误差确保在±0.2mm之内,提升了焊接的精度和焊接的品质。
其他文献
目标跟踪是计算机视觉领域的重要研究方向。因为目标跟踪技术在多个领域都具有举要重要应用价值,所以目标跟踪是目前计算机视觉研究的热点。本文通过近几年的目标跟踪方法进
研究背景和目的:心衰(heart failure,HF)是一种心脏泵血功能障碍与代偿性激活的神经体液因子相互作用为特征的临床综合征。心梗后心室重构及交感神经系统过度激活可加剧心功
脑-机接口(Brain-Computer Interface,BCI)通过解析输入的脑电信号,将用户的意图解码为控制指令来控制输出设备,实现人脑与外部设备的交互。脑-机接口技术的核心是脑电信号的
近年来,随着科技的发展,复杂动态网络广泛渗透于各行各业,在人类社会生活中占据着十分重要的地位。例如在互联网、交通、通信、生物医疗、智能制造、社交网络等领域得到了广
我国是世界能源生产和消费大国,随着经济社会的不断发展,我能源需求将持续增长。增加能源供应,保障能源安全、保护生态环境、促进经济和社会的可持续发展,是我国经济和社会发
涉藏舆情是社会管理部门了解藏区民众对社会政治态度等更为直接途径,同时也是制定舆情管控策略、引导舆情导向的重要依据。随着互联网尤其是境外网站中所包含大量的涉藏舆情
随着数字图像的发展,人们对图像质量的要求日益提高。高动态范围成像技术的出现满足了人们的需求,该技术还原了实际场景的亮暗信息,更符合人们视觉感受,并且促进了数字化信息
随着云计算、物联网、大数据和虚拟现实等信息技术服务的日益普及,传统的固定和无线接入网正面临带宽指数增加的挑战。无源光网络-可见光(Passive Optical Network-Visible L
随着物联网和智能电网的迅速发展,优化用电信息采集系统及采集主站、采集终端、结构、通信、精准采集成为了需要迫切完成的任务。现用的各类用电信息采集系统中针对实时采集
随着软硬件技术的发展及网络带宽的不断增加,图像和视频数据越来越多,如何使计算机有效的处理和理解这些数据,以协助相关行业人员,是一个重要的问题。2012年深度学习的兴起,