AR应用场景下的人脸特征点检测

来源 :吉林大学 | 被引量 : 0次 | 上传用户:shimin_job
下载到本地 , 更方便阅读
声明 : 本文档内容版权归属内容提供方 , 如果您对本文有版权争议 , 可与客服联系进行内容授权或下架
论文部分内容阅读
人脸信息作为一种重要的生物识别特征,在学术界和工业界一直都被广泛关注和使用。近年来,计算机视觉领域在较高理论水平的基础上,硬件水平也得到迅猛发展,使得人脸检测以及更精细化的人脸特征点检测的速度和准确率也迅速提升。基于面部的增强现实应用以注册的面部信息为基础,在真实场景下的面部信息上利用相关技术叠加虚拟效果,其中人脸特征点检测是拟合过程中重要的研究基础,这一领域在现有应用中也有人脸化妆等诸多场景。当前,人脸特征点检测算法的定位精度、效率以及拟合实现效果等仍需提升,无论是电商销售平台的试戴效果还是美颜相机中的化妆效果,都需要逐步实现从约束条件到无约束条件的过渡。因此本文针对具有头部姿态、人脸表情变化较大和背景复杂等特性的面部增强现实应用场景进行分析和研究,完成具体到“影视剧替身”这一场景的实现效果。在详细分析这一场景特性的基础上,本文的主要工作有以下两方面:1.提出了一种基于级联回归框架改进的方法——CPR-LADF算法,解决人脸特征点检测算法输出结果受头部姿态变化和复杂背景的影响较大的问题,提升了算法的鲁棒性并在一定程度上提高了算法速度。在提取特征的过程中,本文采用了一种像素差特征的变体特征,该特征相对于像素差特征更加稳定,在头部姿态和人脸表情变化较大时,相对比于其他基于级联回归框架的FPS3000等算法有更好的输出结果;在训练随机森林模型的过程中,本文以3-6个特征点为顶点组成局域,在局域内随机选择参考点求其均值,再将均值做差作为分裂特征,对每个特征点建立随机森林,通过多次迭代输出每一阶段的人脸形变量,逐步优化随机森林模型,然后利用全局线性回归和多模型融合获取输出结果,最终准确定位人脸特征点。2.实现了“影视剧替身”应用场景的AR效果通过上述算法的改进增强了无约束条件下的人脸特征点的检测效果,在具有复杂背景等特性的“影视剧替身”场景下实验了AR换脸效果,该研究成果能够较好的实现虚实融合的效果,这在一定程度上开拓了影视剧行业现存问题的解决思路,例如明星出场费过高、制作成本分配不合理等等。同时也可以带给用户更佳的观影体验,有较大的深入研究和应用价值。最后本文给出了实验方案并进行分析,本文改进的人脸特征点检测算法在算法鲁棒性和检测速度上都有一定程度的提升,同时对于无约束的基于面部信息的增强现实应用来说也有一定的促进作用。
其他文献
<正>随着企业管理水平的逐步提升,对精细化和智能化管理要求也在不断提高。传统的信息管理方式已经显现出明显的不足。单一功能和单一部门驱动的信息化建设伴随而生的信息孤
目的分析经同侧腹直肌易位造口在腹腔镜造口旁疝修补术中的应用价值。方法选取2016年8月至2017年12月,重庆市开州区中医院收治的60例乙状结肠造口旁疝患者,随机分为对照组和
提出了一种混合型有源限流电抗器无功补偿的方案,并对其原理进行了详细分析。整流侧通过d-q解耦控制,实现直流电压与交换无功的解耦控制。逆变侧则采用电流滞环控制使输出电流
文章利用2017年全国流动人口动态监测调查数据,通过描述性统计分析与二元logistic回归,发现2017年全国有八成以上流动人口选择继续留在流入地,其中东北地区的流动人口最高为8
文学是一种语言的艺术。在百年中国文学的现代性历程中,语言变革无疑是最直观、最明显的因素。所谓百年中国文学的现代性,其基础表征就是文学语言的现代性。百年来中国文学发
全球能源互联网是通过建设大量分布式发电及储能设备,以提升电力系统灵活性和自愈能力,旨在实现以“可再生能源+互联网”为基础的能源共享网络。随着全球能源互联网的不断发
针对便携式医疗监护的需求,以高集成度、低功耗的PIC18F27J13单片机为内核,通过SPI总线与Micro-SD卡进行通讯,对采集到的心电数据进行实时存储,并通过上位机软件显示,方便医
《财务管理》课程是财会类专业的核心课程,在专业课程体系中居于基础和核心地位,对培养学生的综合财商素养和财务分析决策能力起到支撑作用。传统教学模式以教师为中心,重教
基于创新人才能力的形成规律以及研发活动、组织学习的创新性特征,探讨了研发活动、组织学习培养创新人才的内在机理与重要作用,提出了组织学习与研发活动一体化的企业创新人