【摘 要】
:
物体六维姿态估计目的在于从图像识别特定目标物体,然后预测物体相对于模型坐标系的位置和朝向。估计出的物体姿态可以应用到很多实际任务中,比如机器人操作、自动驾驶,和增强现实。随着深度学习近些年来的快速发展,基于深度学习的方法已经主导了物体六维姿态估计领域。基于深度学习的物体六维姿态估计算法需要大量的带标注训练数据,然而,对数据的采集和标注是非常昂贵的,对于物体六维姿态估计来说更是如此,原因在于标注物体
论文部分内容阅读
物体六维姿态估计目的在于从图像识别特定目标物体,然后预测物体相对于模型坐标系的位置和朝向。估计出的物体姿态可以应用到很多实际任务中,比如机器人操作、自动驾驶,和增强现实。随着深度学习近些年来的快速发展,基于深度学习的方法已经主导了物体六维姿态估计领域。基于深度学习的物体六维姿态估计算法需要大量的带标注训练数据,然而,对数据的采集和标注是非常昂贵的,对于物体六维姿态估计来说更是如此,原因在于标注物体六维姿态需要在三维空间上做匹配。因此,使用合成数据进行训练是一个值得研究的方向。本文提出一个为物体六维姿态估计任务优化的统一化数据合成流程。通过将虚拟场景生成、渲染环境搭建、标注合成,以及数据存储有机地结合起来,我们提出的数据合成流程可以为各类任务场景提供大量带标注合成数据。并且,得益于物理仿真器和现代化渲染引擎,通过该合成流程生成的数据是基于物理约束的和视觉逼真的。为了提高神经网络在使用大量合成数据辅助训练时的准确率,本文提出了一种边缘注意机制。通过引导网络预测一个归一化的边缘图,我们强制网络关注低层次几何特征。本文提出的边缘注意机制也可以提高在遮挡场景下算法的表现。结合合成数据和边缘注意机制,我们的方法在仅仅使用RGB的情况下,在Linemod数据集上的ADD(-S)平均准确率达到了96%,比GDR-Net高了2.5%,同时,比Densefusion的迭代优化版本(基于RGBD)提升了1.9%。我们使用在Linemod数据集上训练的网络模型在LM-O数据集上进行测试,达到了53.6%的准确率,比专门在LM-O数据集上训练的GDR-Net算法提升了0.6%。当完全使用合成数据进行训练的情况下,算法会因为域漂移问题导致准确率急速下降。因此,本文将域随机化技术集成进我们提出的数据合成流程,并进一步研究不同的域随机化手段对网络性能的影响。通过选择合适的域随机化技术,在仅仅使用合成数据训练的情况下,我们的基于RGB的方法在Linemod和LM-O数据集上分别达到72.8%和47.5%的准确率,超过使用RGBD作为输入的Self6d 13.9%和15.4%。为了利用无标注的真实数据中的信息,从ICP算法得到启发,本文提出了一种新的自监督学习框架。通过在合成数据上训练深度估计网络,网络可以对真实样本预测深度图。预测出的深度图除了可以用来提升姿态估计网络的表现之外,还可以用来做自监督学习训练。自监督学习的目标是缩小预测的深度图和用估计的姿态转换之后的物体点云之间的距离。本文提出的自监督学习框架将Linemod数据集上的准确率从72.8%提升到78.1%。
其他文献
近年来随着气候的不断变化,CO2浓度持续增加导致高温等极端天气频发,高温对植物幼苗的生长发育带来了严重的危害。达乌里胡枝子(Lespedeza davurica)是豆科优质牧草,具有很高的生态价值和饲用价值,其幼苗期的生长状况决定着后期生物量的高低和品质的好坏。为探讨达乌里胡枝子对不同CO2浓度和高温胁迫条件的响应,本试验以‘晋农1号’达乌里胡枝子为试验材料,利用人工气候培养箱设置3个CO2浓度(
机械臂抓取系统在工业领域的上料、装配和分拣过程中有着广泛的应用。从摄像机的视觉观测中学习机械臂抓取姿态是一项有着广阔前景但非常有挑战性的任务。最近的研究表明,视觉抓取姿态估计网络可以使得传统的机械臂抓取系统摆脱人工示教和抓取姿态注册的依赖。受此启发,本文提出了一种基于视觉的六自由度抓取姿态估计方案。本文的主要工作在于:1.本文提出了一个端到端的六自由度抓取姿态估计网络,该网络以单视角物体部分点云作
植物水力性状对干旱的响应已成为全球气候变化背景下的研究热点。该研究选取了湿润的关帝山和干旱的黑茶山两种对比水分条件下的八个相同树种,测量其根-茎-叶水力性状、导管性状和形态性状,探索不同树种的水力性状对水分条件变化的响应模式及其驱动因素,并分析根、茎、叶水力性状之间的权衡关系、耦联关系和脆弱性分割机制。结果如下:(1)对同一树种而言,湿润的关帝山根、茎、叶最大导水率(Kmax)和栓塞脆弱性(P50
氨挥发是氮素气态损失的主要途径之一,放牧是草地的最基本的利用方式。在不破坏草地生态系统服务功能的同时,评估放牧强度对草地生态系统土壤氨挥发的影响,对降低氨挥发的排放量,提高草地生态系统氮利用率至关重要。为探究草地土壤氨挥发对不同放牧强度的响应,本试验基于山西右玉黄土高原草地生态系统定位观测研究站,以晋北农牧交错带赖草草地为研究对象,设置不放牧(0羊单位·hm-2)、轻度放牧(2.35羊单位·hm-
晋北农牧交错带盐碱草地不仅是草地生态系统的重要组成部分,还是维持我国北方生态安全的关键屏障,然而由于自然因素和人类活动的影响,该区域草地生态环境不断恶化,草地盐碱化问题日益严重,严重制约了当地草地生态系统的可持续发展。因此,本研究以晋北农牧交错带盐碱草地为研究对象,分析草地盐碱变化过程中(轻度盐碱化草地、中度盐碱化草地和重度盐碱化草地)植物特征、土壤特性、丛枝菌根真菌(Arbuscular myc
围封是最简单、实施面积最广和实施时间最充分的天然退化草地恢复的有效措施之一,围封不仅有助于恢复草地物种多样性、提升生产力,而且有利于草地土壤结构与功能的维持。尽管围封效果方面的研究已经有很多报道,而且大部分研究基于不同退化程度、不同土地利用方式类型等方面展开,但是围封对不同建群种类的典型草原植被和土壤的影响及其对比研究还不多见。本试验以内蒙古锡林河流域长期围封和自由放牧的羊草(Leymus chi
黄土高原干旱半干旱草地存在结构简单、生态功能低下等问题。长期水土流失与不合理农业生产活动导致该地区多为养分限制生态系统,施肥是促进该区草地生物量提升和草地恢复的有效措施。合理的氮磷添加不仅有助于提升草地生物量,还可优化群落结构和功能,加速草地恢复进程。本研究以晋北赖草草地为研究对象,采用随机区组设计设置了对照(CK)、氮添加(N,10 g·m-2·yr-1)、磷添加(P,10 g·m-2·yr-1
盐分胁迫是目前全球最常见的一种非生物胁迫,高盐胁迫对植株的生长有一定的抑制作用,而外源补充褪黑素则可以增强其抗逆性。到目前为止,盐胁迫下褪黑素对达乌里胡枝子(Lespedeza davurica)的影响及调控机理还未见报道。因此本试验以山西农业大学草业学院自主培育的“晋农1号”达乌里胡枝子(Lespedeza davurica cv.Jingnong No.1)为材料,探究100、200、300、
放牧是北方草地主要利用方式之一。放牧通过家畜的采食、踩踏、粪尿归还影响草地生物地球化学过程,但是不同的放牧强度如何影响草地土壤限制性养分——氮素转化过程的研究并不多见,尤其在农牧交错带草地,限制了我们对放牧草地生态系统生产力关键制约因子的认识。本研究以山西右玉典型农牧交错带赖草草地为研究对象,依托2016年建立的不同放牧强度试验平台,包括4个放牧强度:不放牧、轻度放牧(2.35羊单位·hm-2·生
近场赋形不局限于单点聚集,而是能够在一定区域内实现自定义形状的赋形场,适用于局部微波热疗,金属成型切割等场景。现有基于时间反演(Time Reversal,TR)的场赋形主要集中于瞬态场,从频域角度讨论近场赋形场的研究较少。此外,与常用的频域阵列综合方法不同,TR方法不需要考虑单元的互耦,简化了计算。当将其应用于大规模阵列的场综合时,这种优势就变得很有帮助。本论文基于时间反演结合平面结构在近场实现