基于级联姿态回归的局部遮挡人脸特征点定位研究

来源 :武汉理工大学 | 被引量 : 0次 | 上传用户:zybmc
下载到本地 , 更方便阅读
声明 : 本文档内容版权归属内容提供方 , 如果您对本文有版权争议 , 可与客服联系进行内容授权或下架
论文部分内容阅读
人脸特征点定位是指自动标定出脸部特征点的位置,是研究和分析人脸图像的基础。然而在局部遮挡的人脸上定位特征点依然是一个难点问题。近年来,基于级联姿态回归模型的人脸特征点定位算法受到广泛关注,该模型在遮挡人脸上取得较好的定位精度并且在定位的同时还可以预测特征点的遮挡状态。该模型由给定的初始形状开始级联回归,通过不断更新当前特征点的位置分布和遮挡状态,逐步逼近特征点真实位置,因此该模型必然依赖初始化,对初始形状敏感,不合理的初始化会严重降低定位和遮挡检测的准确性,甚至导致定位失败。除此之外,现有模型仅通过一级级联回归更新特征点位置与遮挡状态,没有合理的方法评估预测结果是否可靠,也会影响特征点定位与遮挡检测的可靠性。本文对这些问题展开了深入的研究,主要工作如下:1)针对级联姿态回归模型对初始化很敏感的问题,本文提出了基于纹理相关初始化的级联姿态回归算法。通过提取训练集中所有人脸与测试人脸的纹理直方图矩阵,利用皮尔逊相关性分析方法分析当前测试人脸与训练集中各个人脸的相关性,从而寻找到与当前测试人脸最相关的形状作为初始化。该算法提高了初始形状的鲁棒性,在COFW数据集上特征点定位的精确度更高,并且特征点的遮挡检测精确度从80/42%(Precision/recall)提高到80/51.4%。2)针对基于纹理相关的初始化仅考虑了人脸的纹理特征未考虑姿态信息的问题,因此本文提出了基于鲁棒初始化的级联姿态回归算法。该算法通过初步定位脸部五个特征点分析当前人脸姿态,利用求得的人脸姿态结合平均脸求得姿态相关初始形状,并将姿态相关初始形状结合纹理相关初始形状得到鲁棒的初始化,该初始化在遮挡和姿态上都更接近人脸的真实状态。在输出结果时不再选取所有预测结果的中间值,而是通过方差评估的方式判定各个预测结果的有效性,取有效预测的中间值。该算法在COFW数据集上的准确度超越了当前许多主流的特征点定位和遮挡检测算法。实验表明该鲁棒初始化方法也适用于其他级联回归模型,具有一定的泛化能力。3)针对一级级联回归没有评估预测结果可靠性的问题,本文提出了基于稀疏重构修正的两级级联姿态回归算法。主要包含三个步骤:首先利用基于鲁棒初始化的级联姿态回归算法得到初级定位结果,然后在初级定位的基础上,利用稀疏重构算法计算各个特征点的重构残差,根据重构残差判断初级定位结果的可靠性从而修正不可靠的定位结果,再根据稀疏系数中非零项对应的字典元素的遮挡信息重新计算当前特征点的遮挡概率。最后利用修正后的结果作为二级级联姿态回归的初始化,再次回归得到最终定位与遮挡检测结果。此算法不再单纯的使用级联回归更新特征点位置与遮挡状态,而在中间考虑了特征点本身的信息,利用稀疏重构算法去修正位置及遮挡概率。实验表明该算法的性能进一步优于基于鲁棒初始化的级联姿态回归算法。本文主要针对级联姿态回归模型在遮挡人脸定位上初始化不够鲁棒,以及一级级联回归中未评估回归结果和遮挡检测准确度不高的问题,提出了改进方案。实验结果表明,本文提出的算法在遮挡人脸特征点定位上取得了较好的性能,在定位与遮挡检测准确度上超越了当前许多主流的人脸特征点定位算法。
其他文献
<正>医疗事故鉴定已成为当今社会各界关注的热点,而法医病理鉴定介入医疗纠纷诉讼的作法至关重要。解决涉及死亡的医疗纠纷案件常需要医疗鉴定结果,在裁决前一般均需作尸体解
会议
我国西南岩溶地区的石漠化是喀斯特生态系统退化到极端的表现形式,已严重制约当地经济社会发展和生态文明建设。因此,评价和模拟未来区域石漠化发展趋势十分迫切。文山州为云
幼儿园教学的本质就是将幼儿作为教学中的主体,在教学的过程中充分尊重幼儿的主体地位。然而从目前幼儿园教学的现状来看,形势不容乐观,对此,幼儿教师必须依据教学的现状探讨
宇宙学扰动可以分成三大类,分别是标量扰动、矢量扰动和张量扰动。这些扰动会对我们宇宙中的引力波产生影响,研究这些扰动的物理性质可以在很大程度上帮助物理学家去认识引力
<正>盈利模式是商业时代关系到媒体生死存亡的重要因素,传播方式的差异应该是新媒体与传统媒体形成差异竞争的根本:既不再仅仅依靠于内容,而基于互动关系的盈利模式将有可能
2007年10月21日,美国加州发生森林大火,截至25日,10余起山火已导致12人丧生,60多人受伤,近百万人被疏散。火灾破坏面积百倍于广岛核爆,毁林1970平方公里,烧掉10个亿。
在实际工程问题中,存在大量的类别不均衡问题,如故障诊断、网络入侵检测等。且该类问题具有明显的时间特点,尤其是在大规模数据环境下,数据通常是按序到达,是一种典型的在线
<正> 2004年3月,我社编辑赵泽华被全国妇联评为全国三八红旗手。赵泽华同志19岁时被火车轧伤(左腿假肢),头部和腰部也受过重创,1999年底,在一次意外事故中右腿受伤,右手腕骨
期刊
β-葡聚糖具有影响淀粉消化性的潜力,以致可以降低血糖的生成指数。随着β-葡聚糖的粘度增加,体外的淀粉消化性可以降低,血糖生成指数亦可降低。本文主要研究在面包中添加猴
目的:生长因子的异常表达常常与肿瘤的形成密切相关。中期因子(Midkine,MK)是一种新发现的肝素结合性生长因子,首先在视磺酸诱导分化早期的胚胎瘤中被发现,但与其他肝素结合