【摘 要】
:
人体外形重建在许多场景中都扮演着必要的角色,例如在虚拟现实游戏、电影特效、产品定制、增强现实等许多应用中都少不了人体外形重建。图像和视频是信息传递的主要载体,因此如何从图像和视频中获得人体姿态一直是计算机视觉的研究热点之一。当前大多数研究工作都试图采用回归人体参数模型,从而产生与图像和视频中人体一致的姿态。然而,这些方法存在以下问题:人体参数模型无法显示,诸如头发、面部表情、衣服的细节等;因为从高
【基金项目】
:
面向人机交互的服务机器人感知和交互方法研究,国家自然科学基金资助项目(编号61573145),2016年1月1日至2019年12月31日; 智能工业机器人的感知和交互及学习方法研究,2015年度省基础与应用基础研究(省自然科学基金,编号2015A030308018),2016年1月1日至2020年1月1日
论文部分内容阅读
人体外形重建在许多场景中都扮演着必要的角色,例如在虚拟现实游戏、电影特效、产品定制、增强现实等许多应用中都少不了人体外形重建。图像和视频是信息传递的主要载体,因此如何从图像和视频中获得人体姿态一直是计算机视觉的研究热点之一。当前大多数研究工作都试图采用回归人体参数模型,从而产生与图像和视频中人体一致的姿态。然而,这些方法存在以下问题:人体参数模型无法显示,诸如头发、面部表情、衣服的细节等;因为从高维空间到特定参数空间的映射忽略了输入图像中像素的空间关系。上述缺点导致了训练困难,降低了人体重建准确度。为此,本文进行了以下工作:首先,本论文采用网格模型表示人体,提出了基于生成对抗网络的图像人体重建方法。对于大量网格顶点的回归任务,在生成器中引入图卷积网络来回归网格坐标。图卷积网络利用网格拓扑捕获3D人体的完整信息,然后生成更平滑和高质量的人体网格模型。此外本文提出了使用对抗训练鼓励生成器输出接近真实数据分布的人体网格模型。其次在视频人体重建方面,本论文提出了结合GRU和自注意力机制的视频人体重建方法。该模型利用GRU循环神经网络来处理时间序列数据。该网络在生成器和运动判别器引入GRU以捕获人类运动的顺序性质,运动判别器采用注意力机制来放大视频中重要帧的作用。本论文在多个公开数据集上评估了所提出人体重建方法,在图片和视频人体重建方面均能够恢复较准确的人体姿势。通过于其他方法对比,本论文在人体形状和姿势估计方面具有更好的性能,从而验证了本论文所提出方法的有效性。最后,本论文在上述研究工作的基础上实现了一款基于生成对抗网络的3D人体重建系统,该系统整合了图片和视频人体重建流程。并依据3D人体重建的需求,该3D人体重建系统不仅实现了文件选择、神经网络选择、输出人体重建文件等一系列功能,而且测试结果良好。
其他文献
近年来地产行业融资渠道持续收紧、市场竞争日益激烈等形势的变化,使房地产企业需在短时间内提高自身抗风险能力并形成自身品牌优势,因此并购已成为一种主要方式。2017年富力地产收购万达酒店活动缓缓拉开帷幕,此次并购被行业内称为“世纪并购”。本文以富力地产收购万达酒店为例,对企业并购中财务风险问题进行了研究,在厘清研究框架的基础上,采用文献研究法归纳整理了国内外学者对并购财务风险控制的研究成果,依据风险控
在大数据时代和全国教育信息化的背景下,互联网中已经存在大量的数学题资源。而数学题相似度计算方法是从这些资源中精准检索出所需题目的关键技术。目前的数学题检索应用主要是基于文本相似度计算方法,而未考虑数学题的逻辑关系和几何数学题的图形。尽管数学题中相同题意的句子会有不同的自然语言表达,但其中的逻辑关系是不变的。此外,几何数学题的图形信息也应纳入相似度计算。因此关注逻辑关系和图形信息的数学题相似度计算方
压电智能骨料是目前用于混凝土结构健康监测中常用的传感器,可进行动态应力及材料性能的超声监测。压电智能骨料嵌入结构时往往需要通过粘结或绑扎方式固定到钢筋等支撑结构上,支撑结构干扰监测区域应力场且传感器位置稳定性较差,由此影响监测精度。本文提出一种新型的压电智能骨料嵌入方法——预制块嵌入法(Concrete Block Casing,CBC)。通过数值及试验研究发现,与传统嵌入方法相比新型嵌入方法显著
刺激隐核虫(Cryptocaryon Irritans)是严重危害东南亚海水养殖鱼类的寄生虫病原。MAPK与MHC Ⅱ抗原提呈通路是宿主免疫激活及特异性免疫起始的重要通路,在该寄生虫介导的鱼类相关通路应答机制还不清晰。本论文以石斑鱼为研究对象,对刺激隐核虫感染石斑鱼后的MAPK经典通路中的重要分子MEK及C-Raf,以及其通路与MHC Ⅱ信号通路相关性进行了研究。MEK双特异性蛋白激酶是一类丝裂原
显著性目标检测任务旨在将图像中最具有视觉差异性的区域定位和分割出来。它被广泛应用于其他复杂的计算机视觉任务的预处理,如图像编辑、图像描述以及问题回答等,以简化这些视觉任务,提高任务处理的效率。近年来,得益于全卷积神经网络的飞速发展,显著性目标检测的研究者们做了大量的工作,极大地提升了显著性目标检测的性能。然而在显著性目标的尺度、形状多变以及背景环境复杂的场景中,现有的算法无法捕捉到变化目标的信息,
世界城市化建设的浪潮和人类过度活动的冲击是导致生态系统稳定性下降的重要原因,也威胁着世界的自然与文化遗产的保护与传承。国际社会逐渐认识到这种发展并非长久之计,提出可持续发展目标,并在近年开始倡导自然与文化协同发展。我国“十二五”规划提出生态文明建设,当前逐步落实国土空间规划,坚定走中国特色可持续发展道路。可持续发展目标不仅对生态系统自然环境的健康维持提出要求,也对文化遗产保护和文化空间建设提出新的
传统改性沥青的成本增加、制备工艺复杂、相容性差、储存稳定性差,促使人们在不影响改性沥青性能的前提下,开发环保、可再生、经济的改性沥青。为了克服常规改性粘合剂的上述缺点,引入用于柔性路面的改性粘合剂的替代来源是必不可少的。近年来,木质素作为一种沥青改性剂,因其来源广泛、价格低廉、可再生性好、具有提高沥青路面使用性能的潜力而受到越来越多的关注。然而,现有研究缺乏对不同类型木质素改性沥青的性能、储存稳定
网格模型与点云模型是三维模型的两种重要表示方式。为了使三维模型呈现的真实感更加强烈,网格模型与点云模型的精细程度变得越来越高。这给数据加载和模型渲染带来了巨大的挑战性。为了减少加载和渲染三维模型的时间开销,合理的解决方案是通过减少原始网格模型中的面数或点云模型的点数来对三维模型进行数据的精简。许多研究者提出了保持三维模型几何形状特征的简化算法并取得了成功的效果。然而三维模型的颜色和纹理特征在模型的
醇醚羧酸盐(AEC)是一类新型阴离子表面活性剂,毒性小、易生物降解、表面张力低及与其他表面活性剂配伍性好等特点,是一类多功能的绿色表面活性剂。我国对AEC的研究已有十多年,主要工艺路线为氯乙酸钠与脂肪醇聚氧乙烯醚反应制备AEC。但由于氯乙酸钠羧甲基化法的产品质量不高,限制了产品的应用推广。与传统工艺相比,贵金属催化氧化法具有工艺流程短、对设备要求低、可用于连续化生产并可制成高纯度产品等优点,因此引
神经元电活动蕴含着丰富的神经信息.因此对神经元的放电节律的研究更有助于理解神经信息的编码和表达.内分泌神经元控制体内各种激素的分泌,对个体的生长、发育以及身体机能的调控起着至关重要的作用.本研究以三维的内分泌模型为基础,结合动力系统分岔理论,通过数值模拟与理论分析探究该模型固有的动力学性质以及在电磁感应下神经元产生的分岔与放电模式.本文第三章研究了钙离子电流变化下内分泌神经元产生的放电模式.利用快