基于深度学习的焊缝识别及路径生成系统研究

来源 :哈尔滨工业大学 | 被引量 : 0次 | 上传用户:Javayuyu
下载到本地 , 更方便阅读
声明 : 本文档内容版权归属内容提供方 , 如果您对本文有版权争议 , 可与客服联系进行内容授权或下架
论文部分内容阅读
随着中国制造2025战略的提出,我国制造业各领域都向着自动化与智能化的方向发展。焊接技术作为工业重要的组成部分之一,智能化焊接对于工业发展有着重要意义。焊缝识别技术作为实现焊接自动化的核心技术之一,同样引起了学术界以及工业界的广泛关注。当前关于焊缝识别与检测技术的研究主要集中在小窗口特定环境下的焊缝识别定位,对于复杂环境下的多焊缝目标识别的研究还不够深入。而且相关算法参数固定,对环境适应性差。近年来深度学习的发展则为焊缝识别提供了新的思路。因此针对当前焊缝识别算法识别窗口小,算法适应性差等问题,本文提出了基于深度学习的焊缝识别及路径生成系统,旨在实现复杂环境下焊缝的识别检测,配合深度相机实现焊接路径的生成,并最终完成功能模块的封装以及软件开发工作。首先进行焊缝图像数据集的搭建工作。本文搭建的Welding Seam数据集包含有约2000张焊缝图像数据,包括对接接头焊缝,搭接接头焊缝以及T型接头焊缝等多种类型焊缝,同时使用翻转,加噪等手段进行数据集的扩充并对焊缝类型以及目标为位置进行标注。本文在Faster-RCNN的基础上搭建深度神经网络模型。该模型按照功能分为目标提取模块,预选区域生成模块和目标识别及位置回归模块。目标提取模块由多层卷积层与池化层组合而成,用于图像特征图的提取工作。预选区域生成模块主要是在特征图像的基础上生成备选区域,并最终在目标识别部分完成分类识别任务,在位置回归部分完成目标定位工作。通过模型的训练以调试工作实现复杂背景下焊缝的识别定位工作。为了实现焊接路径的生成工作,本文在虚拟环境下进行基于深度图的焊缝定位与中心线提取研究。主要包括对深度图像的分割,滤波以及焊缝边缘提取工作,利用局部最值提取焊缝中心线,并根据坐标变换实现焊缝位置的空间定位,生成焊接路径。最后进行了模块整合以及相关软件的开发工作,实现焊缝识别系统功能的封装以及面向用户化设计。软件按照功能划分主要包括:Dataset模块,Net Work模块以及图像处理模块。利用PyQT进行相关用户界面的设计并利用多线程实现界面与业务的分离工作。深度学习技术为智能化焊接提供新的思路以及解决方案。本文利用深度学习技术实现焊缝的识别以及定位工作,并配合深度相机设计路径生成系统为自动化,智能化焊接提供了“智慧”的眼睛。
其他文献
柔性压力传感器在可穿戴电子、医疗保健和智能终端等领域已经有了广泛的应用,在人工智能(AI)和物联网(IoT)等新技术领域发展也十分迅速。因此,正如最近的研究所揭示的那样,柔性压
章动面齿轮传动综合了章动齿轮传动和面齿轮传动的优点,是在外切面齿轮与内切面齿轮所构成的共轭啮合齿轮副(简称“面-面”齿轮副)的基础上,结合章动原理而形成的一种新型传
为了提升真空断路器电机操动机构性能,降低合闸时动触头碰撞损耗和弹跳时间,并为储能电容充电,本文以126kV真空断路器电机操动机构为研究对象,设计了真空断路器电机操动机构
手语识别是一个涉及模式识别、计算机视觉、自然语言处理和人工智能的多学科研究领域。结合日益发展的深度学习方法,手语识别模型的性能指标会得到大幅度的提高,手语识别系统
光学传感方式由于具有远程、非接触、可视化的特点而受到广泛关注。然而光子晶体传感器制备繁杂、成本高、基底脆性等使其应用受到显著限制。全息传感器通过记载于光敏材料内
在当前信息化时代,由于信息的大量产生导致了信息爆炸,因而引起了信息过载,这是人们需要面对的一个困境。推荐系统通过根据用户的需求来个性化地满足用户的需要,成为缓解这一
2019年,根据国家统计局发布的数据我国60岁以上老年人口数量达到了24949万人,占总人口数量的17.9%,我国人口老龄化程度加深。目前我国脑卒中患者数量达到7000万人,而且每年脑
无线传感器网络是21世纪跨越多个领域的综合性网络,由众多技术共同支撑。其中的节点定位技术是决定用户终端接收到可靠有效信息的关键技术,直接影响着整个网络的定位精度。目
随着人口老龄化的加剧,由脑卒中引起的上肢运动功能障碍患者的数量大幅增加。目前,利用康复机器人对偏瘫患者进行康复训练已成为国内外研究的热点。然而现有的上肢康复机器人
工程建设向来是一个高风险的行业,在整个项目的生命周期中都会面临风险的巨大挑战。对于投入高、周期长的高速路项目来说,在工程的具体实施过程中,需要综合考虑人员、设备等