面向机器人拣选的物体三维重建与定位抓取技术研究

来源 :上海交通大学 | 被引量 : 0次 | 上传用户:lemayn
下载到本地 , 更方便阅读
声明 : 本文档内容版权归属内容提供方 , 如果您对本文有版权争议 , 可与客服联系进行内容授权或下架
论文部分内容阅读
随着电子商业的高速发展,在物流仓储行业中,小零件货物的订单数量日益增多,但它们的拣选往往需要大量工人手动进行。因为每天进入仓库的新货物种类数目多,外形多样,并且仓库货架环境复杂,很难使用传统的自动化分拣流水线,人工拣选更为稳定和高效。但在人力成本升高和“机器人换人”的趋势下,使用机器人完成物流拣选任务成为了新的研究热点。一般情况下,机器人拣选首先需要在场景中识别出目标物体,并获取目标物体的六自由度位姿,最后控制机器人进行抓取。但由于仓库中货物流通速度快,拣选机器人的准备时间短,所以在物体识别与定位上主要有三个难点:需要在短时间内,获取新入库物体的形状、颜色等特征;需要在短时间内,自动生成并标注新物体的数据集,以便于训练物体检测算法;需要在复杂场景下,实现对多种物体的识别与位姿估计,并降低算法复杂度和训练时间。因此,本文提出了一种面向机器人拣选的物体特征信息获取与位姿估计方法,并搭建了机器人抓取系统,主要内容包含以下几个方面:1)针对快速获取新入库物体的特征信息问题,本文搭建了一套物体快速三维重建系统。该系统使用RGBD相机,通过二维码计算相机初始位姿,使用点云-模型的配准方法优化相机位姿,然后利用TSDF方法融合各帧点云,并泊松重建连续表面,最后形成物体的彩色三维模型。在实验中,该系统可以获得各种物体的完整三维模型,并且由于使用了GPU并行计算,可以进行实时稠密建模。2)针对以往物体数据集需要人工手动标注,耗费大量时间的问题,本文设计了基于OpenGL的模型渲染方法自动生成物体标注数据。通过将物体模型导入虚拟采样球,随机改变环境光线状态,并使用采样球表面的虚拟相机获取模型各视角图像。最后,随机设置物体模型图像位置和缩放尺度,并叠加随机背景,自动生成标注物体数据集。3)针对复杂环境下的物体识别和位姿估计问题,本文提出了使用深度学习物体识别网络与传统点对特征匹配方法相结合的位姿估计算法。它使用自动生成的数据集,训练物体识别网络,并根据识别结果分割目标物体周边的场景点云。在点对特征位姿估计上,先使用物体模型生成点对特征哈希表,并在分割的场景点云上采样点对特征,通过匹配模型点对特征和场景点对特征,投票估计目标物体的位姿结果。在位姿估计实验中,相较于传统的点对特征方法,本文方法在算法用时和位姿估计稳定性上都有较大优势。最后,本文还设计了物流仓库环境下的物体抓取实验,分析了物体识别率、重复抓取率和成功抓取率,不仅验证了本文方法的拣选效果,也说明了本文方法具有一定的实际应用价值。
其他文献
侦查监督工作是检察机关法律监督工作的重要组成部分。它既是检察机关打击犯罪的前沿阵地,又是诉讼监督的前沿阵地,在打击犯罪,保障人权,维护稳定,促进公正,构建和谐社会中责任重大
记者是伴随社会科技发展应运而生的队伍,自诞生以来,就以闻讯而来、无孔不入的社会活动家和各种信息的搜集、传播的社会形象,活跃在社会生活中,成为社会各群体相互连接的桥梁,发挥
营业税改征增值税(以下简称“营改增”)试点方案于2012年开始启动。此后的2013年“营改增”在部分行业试点并推向全国。经过多年实践摸索,随着建筑业、服务业、金融业、房地
石墨烯由于具有优异性能被看做是出色的增强体,而铝合金具有轻质高强的特点,因此石墨烯铝基复合材料是具有潜力的新材料,但是目前的研究主要是仅含一种基体的匀质复合材料的研究。本研究提出了一种新思路,通过调整浸渗的铝合金,制备出一种“骨架(A合金)-GNPs-基体(B合金)”结构的非匀质复合材料,使石墨烯两侧合金的成分与性能不同,在热挤压过程中石墨烯两侧产生不一致的剪切应变,通过非均匀变形促使石墨烯片层打
面对“双创时代”创意需求的爆发式增长与专业机构创新能力的日渐疲软形成了不可调和的矛盾,众包以其整合外部创新资源、降低成本等优势应运而生。众包的高效运行能够有效激