基于形变模型的人脸三维重建方法研究

来源 :西安理工大学 | 被引量 : 0次 | 上传用户:gby603
下载到本地 , 更方便阅读
声明 : 本文档内容版权归属内容提供方 , 如果您对本文有版权争议 , 可与客服联系进行内容授权或下架
论文部分内容阅读
随着计算机技术的快速发展,人脸三维模型已经被大量应用于各行各业。如何重建出精度高且具有真实感的人脸三维模型,这一极具挑战性的难题一直困扰着广大的科研学者。相比于二维平面,立体图形最大的优势在于它能反映更多的空间信息,这是二维平面所不具备的。因而越来越多的学者意识其可挖掘的应用价值和广泛的应用前景,也因此人脸三维重建技术目前已成为计算机视觉领域最受欢迎的研究方向之一。如今不少学者都在借助形变模型来研究人脸三维重建技术。在这些研究当中,对于只通过单张人脸图像进行三维重建又是一个重点方向。但由于单幅图片具有的位置信息较少,无法保证从各个角度都可以重建出比较理想的效果。基于形变模型的传统方法,通常对于先验模型的进行形状和纹理参数进行修改从而获得同一模型的多视图再进行模型的对齐和建模。这类方法归根结底是对于形变模型参数的学习。而本文方法是利用卷积神经网络针对于三维模型的空间信息学习,因而与传统的参数学习有着本质区别,并且很好地同时解决了人脸对齐和人脸三维重建等任务。本文提出的人脸三维重建方法主要包括以下几个方面:(1)在人脸三维重建过程中首先需要进行人脸特征点的检测。面部特征点是人脸稀疏对齐的重要根据,也是人脸三维重建之前必须完成的前置工作。本文通过级联回归的方法完成了特征点检测,并使用UV位置图对输入的人脸三维数据进行表示,该方法在UV空间中记录完整人脸的三维空间信息,并提供了与UV空间中每个点的语义紧密对应,将形变模型参数的求解问题转化为了图像特征的学习问题。(2)训练带加权损失的卷积神经网络结构,利用卷积神经网络学习UV位置图中的高阶特征信息。在训练过程中设置不同的权值掩码,为位置图上的每个点分配不同的权值,并计算加权损失。从而更侧重于重点识别区域,通过反卷积部分从还原出与输入尺寸大小相同的UV位置图,后经过网格化和纹理映射得到较为真实的人脸三维模型。该模型以端到端的方式同时解决人脸对齐和三维人脸重建问题。通过实验对比其他重建方法,定性和定量地分析证明了本文提出的人脸重建方法在人脸对齐、人脸三维模型具有更好的效果以及更强的鲁棒性,同时也运算速度相比先前方法得到明显提升。(3)为了在实际中验证所提出的方法,最后将本文方法结合相关的开发软件,设计并制作了一款人脸三维重建可视化系统。使用者通过简单的操作就可迅速实现人脸三维重建的重点步骤,并隐藏了对于体验者不重要的中间环节,简洁而直观地展现出理论方法的结果。
其他文献
<正>近几年随着国家经济的快速发展和教育资源的不断集中,家庭经济条件好的学习成绩优秀的学生都集中到市内学校学习,致使农村小学生产生大量留守儿童和"学困生"。这些学生有
会议
针对双寡头市场中两竞争性企业考虑有限理性公平偏好时的最优定价策略问题进行了研究。这两个竞争性企业分别销售高质量产品和低质量产品。与传统完全理性的企业决策不同的是
运用博物馆学理论知识,结合《博物馆条例》,以左江花山岩画文化景观陈列为例,分析论证陈列展览,特别是基本陈列在推动一个博物馆可持续发展的影响和重要作用。
基于Web的产品设计开发PDM集成具有独特的优点,是当前的技术发展趋向。采用三层架构的PDM网络集成,以JDBC实现数据库联接,并以动态网页、页面发布和链接、定义页面提供的数据
本文对光纤陀螺的非正交角的全温特性进行分析,采用矩阵乘法器分段查表法建立非正交角误差的温度补偿模型,并通过对三轴光纤陀螺仪进行了试验验证,结果表明,补偿后非正交角全
内蒙古和林县农业示范园区被自治区党委、政府确定为内蒙古自治区农牧业产业化示范带及发展乳业的核心区,并成为自治区“六十”年大庆农业领域的献礼项目。区、市、县三级党委
随着经济的发展,环境问题日趋严峻,同时由职业性危害因素导致的职业性危害或灾难也日趋增加,为了遏制环境的日益恶化,目前世界上大多数国家都实施了清洁生产,从源头控制环境