基于深度学习的单图像三维形状生成的方法研究

来源 :中国科学技术大学 | 被引量 : 0次 | 上传用户:ndhlps
下载到本地 , 更方便阅读
声明 : 本文档内容版权归属内容提供方 , 如果您对本文有版权争议 , 可与客服联系进行内容授权或下架
论文部分内容阅读
从单视角图像重建三维形状是计算机视觉的经典问题。对于该问题的研究与求解在虚拟现实、增强现实、自动驾驶等领域有广泛应用。近年来随着深度学习技术的快速发展,深度学习在计算机视觉的多个经典问题上取得了长足的进步并展现出了巨大的潜力。因此,越来越多的研究者尝试将深度学习应用到单图像的三维形状生成任务中来。由单张图像生成三维形状是一个欠定问题,对于该问题的求解通常依赖于利用先验知识消除歧义,而深度学习方法的优势就在于可以在无需人为设计中间表达和推断过程的情况下从大量数据中自动总结先验知识并用于三维形状推断。在已有的尝试中,深度学习方法展现了传统方法不具备的能力,不但能够重建单视角图像所对应的形状,对于单视角下不可见部分也能生成合理结果。
  目前,国内外研究者们对于基于深度学习的从单张图像生成三维形状的研究已经取得了一些进展,但仍旧面临一系列挑战。具体地,如何将二维图像领域的卷积神经网络或者循环神经网络扩展到三维形状的生成中来,如何面向特定三维形状表达满足深度学习方法对于函数可导的需求,让网络学习何种先验以使得人工神经网络具备可扩展的三维形状推断能力,等等。本文围绕连续表面的生成任务进行相关研究,首先提出利用网络回归表面参数化映射实现端到端的多类物体表面网格的生成网络,基于该网络结构,深入分析了该类三维形状生成网络容易产生表面自交的局限性及其成因并提出了一种防表面自交的形状生成网络,最后进一步探索了具有复杂拓扑结构及开放类别目标的三维生成问题,设计了基于部件形状推断的三维网格生成网络。本文的主要工作与创新点包括以下三点:
  1.本文从实际应用中对三维模型的需求出发,结合深度人工神经网络可以拟合任意连续函数的特点,提出了基于网格表面映射的三维表面生成网络。该网络将三维形状的表面表达为从一个预设凸表面到目标形状表面的映射函数,并以深度神经网络从输入图像预测映射函数参数的方式实现对三维形状的生成。该设计首次实现了端到端的由单视角图像生成多类别物体的连续表面网格的深度神经网络。
  2.网格映射网络能够学习预测具有连续表面的三维形状主要得益于神经网络模型具有的高自由度能够拟合任意连续表面。但是这样的高自由度也使得网络难以对输出表面进行精细控制,容易出现表面自交重叠。同时,因为深度学习方法中基于批数据的随机梯度下降使得针对该问题的传统数值优化技巧难以被有效运用于神经网络的训练中。为此本文分析了表面自交与函数单射性质的内在关联性,提出了循环正则化方法,在原有随机梯度下降的优化框架下显著地减少了表面自交的问题。
  3.利用端到端的网格映射网络从图像出发整体预测整个形状,虽然免去了人工设计推理过程的繁琐工作,但是仅仅依靠端到端的学习策略并不能够使得网络具备可泛化到未知类别物体的推断能力。本文进一步探索了基于部件的分步推断的框架,提出了一种部件拼装算法,通过网络学习预测两两部件的边界盒之间的相对位置关系来将部件按接触点进行拼装以实现分步骤生成形状。同时,按部件生成的框架使得原本只能生成单一拓扑的网格映射方法也可以通过部件组合的方式来表达具有复杂拓扑的物体。
其他文献
摘 要:在当前背景下,全面互联网时代的概念已经深入人心,社会的经济、政治、教育等各大领域都在其影响下发生着巨大的变化,人力资源管理也同样面对着“互联网+”时代的冲击。本文从“互联网+”的历史渊源出发,充分阐释其特点,分析当前人力资源管理呈现的新趋势,并提出了针对性的指导意见以帮助企业适应时代的发展。  关键词:“互联网+”;人力资源管理;趋势;对策  随着互联网技术的不断推陈出新,“互联网+”时代
期刊
摘 要:本文针对新一代智能变电站继电保护故障可视化分析方案研究,将从智能变电站中继电保护故障系统现状入手,结合新一代智能变电站继电保护故障可视化分析流程,对智能化变电站继电保护故障可视化技术要求及改进展开论述。最后,本文提出新一代智能变电站继电保护故障可视化实现的具体方案。  关键词:智能变电站;继电保护;故障可视化;分析方案  智能变电站是新一代网络技术的重要成果,不仅降低了电力工程中的人力成本
期刊
摘 要:随着我国建筑行业的快速发展,要想保证建筑工程的施工质量,加大对建筑施工技术管理优化措施的研究力度是十分必要的。基于此,本文对建筑施工技术管理的主要内容进行了分析,并针对当前建筑施工技术管理中存在的问题,提出了相应的优化措施,以此来提高施工技术的管理水平,从而为建筑整体的质量提供相应的保障。  关键词:建筑施工技术;管理;优化措施  目前,我国的建筑市场中存在着激烈的竞争,企业想要使自身在激
期刊
摘 要:随着时代的进步,我国钢材市场得到较快的发展,不论是钢材产量还是质量、品种都呈增长的态势。由于其具有重量轻、易安装、抗震性强、环境污染小且施工周期短、成本低等优点,被广泛应用到施工过程中。基于此,本文针对钢结构工程中施工质量控制措施进行了简单的探究。  关键词:钢结构;施工质量;措施  我国大量建筑采用钢筋混凝土结构和预应力混凝土结构施工,现场工程技术人员比较缺乏钢结构工程的施工经验,施工质
期刊
摘 要:随着建筑行业多元化的发展,建筑工程的管理日趋复杂化,想要提高建筑工程项目的质量和效益,就必须不断提升建筑管理水平,采用更先进的管理方法,这就需要我们不断的改进和创新管理方法和手段。本文对建筑工程管理的创新方法进行探讨和研究。  关键词:建筑工程管理;创新方法;研究  随着我国的社会主义市场经济的不断发展与变化,目前我国的建筑行业的发展面临着许多困难,建筑企业想要在市场中屹立不倒,就要努力取
期刊
摘 要:高铁牵引供电系统是保证地铁车辆正常运行的重要部分,随着微电子技术的快速发展,高铁牵引系统不断趋向完善,同时加强了综合接地设计,在一定程度上提高了高铁运行管理的自动化和信息化,但是对车站信号却产生了一定影响,需要有关部门提高重视。本文高铁牵引供电及综合接地设计对车站信号的影响及解决措施。  关键词:高铁;牵引供电;综合接地;车站信号  随着我国经济的迅速发展,各大城市交通拥挤问题越来越严重,
期刊
摘 要:建筑物外围的保护形式主要是铝合金门窗和幕墙,其性能较好、美观、回收利用的价值高,符合现代建筑节能环保的发展要求。因此,为了扩大铝合金门窗的使用领域,必须提高其隔热和节能性能。本文首先分析铝合金门窗及幕墙在节能技术发展趋势和限制问题,然后讨论加强铝合金门窗及幕墙节能技术应用的措施,从而提高现代建筑的环保节能性。  关键词:铝合金门窗;幕墙;节能措施  随着现代技术的不断发展,现代化的进程日益
期刊
摘 要:随着社会的进步和经济的发展,施工管理安全问题正愈来愈多的受到整个社会的关注与重视。搞好安全生产工作,保证人民群众的生命和财产安全,是实现我国国民经济可持续发展的前提和保障,是提高人民群众的生活质量,促进社会稳定的基础。安全生产是党和国家的一贯方针和基本国策,是促进社会生产力发展的基本保证,也是保证社会主义经济发展、进一步实行改革开放的基本条件。  关键词:管理措施;质量控制;对策  一个工
期刊
摘 要:成本管理是施工企业管理与控制公路成本的主要方法,我国施工企业对于施工成本管理尚未形成一个标准化体系,并且在实际的公路成本管理中没有一个科学的评价标准,这给我国施工企业的成本控制造成了一定的影响。  关键词:成本核算管理;公路施工;应用效果  成本管理的质量对于项目公路的质量具有重要影响。施工企业在中标后,要采用科学的成本管理理论和方法,提高公路项目建设的经济效益,才能够保障企业利益的最大化
期刊
摘 要:建筑行业在人们的生活中占据着重要的位置。而技术管理是建筑行业的顶层设计基础,对控制项目成本和质量控制都有十分重要的作用。通过本次论文的研究,我们发现,我国建筑施工技术管理方面存在着诸多问题,这就需要相关人员积极寻找有效措施进行解决,以促进建筑行业的进一步发展。  关键词:建筑行业;技术管理;问题;措施  随着城市化进程的不断加快,我国建筑行业获得了飞速发展,与从同时,企业之间的竞争也日益激
期刊