轻量级人脸关键点检测算法研究

来源 :安徽大学 | 被引量 : 0次 | 上传用户:lislin
下载到本地 , 更方便阅读
声明 : 本文档内容版权归属内容提供方 , 如果您对本文有版权争议 , 可与客服联系进行内容授权或下架
论文部分内容阅读
人脸关键点检测是一项检测人脸面部关键点位置的视觉任务,在人脸识别、表情识别、人脸动画等领域有着重要的作用,近年来受到越来越多的关注。但是,现有的人脸关键点检测算法通常只考虑如何提高模型的泛化性能,不考虑效率问题。泛化性能好的模型往往包含着巨大的参数量,这导致了这些算法在实际应用中实用性差和可扩展性低。本文引入视觉注意力机制和知识蒸馏的策略,着重研究轻量级人脸关键点检测算法。首先,基于经典的沙漏网络模型(Stacked Hourglass Network,SHN),在不增加模型参数量的前提下,本文提出了一种注意力机制引导的从粗略到精确定位的网络(Attention-Guided Coarse-to-Fine Network,AGCFN)。由于回归模型的扩展性不佳,主流方法采用生成关键点热图(Heatmap)的方式来提高模型的泛化性能。这类算法的输出是多个独立的热图,因此忽略了热图之间关联信息,导致预测的关键点之间缺失位置约束信息。本文提出了一种注意力机制引导的从粗略到精确定位的人脸关键点检测网络,利用视觉注意力机制(Attention Mechanism)来学习通道特征之间关联信息,在不增加模型参数量的情况下进一步提高人脸关键点检测精度。具体分为通道注意力模块和空间注意力模块,通道注意力模块用来模拟通道之间的相互关系,空间注意力模块用于模拟预测图的中二维空间的位置信息。实验证明,相比SHN模型,AGCFN模型在300-W数据集、300-W专用测试集和WFLW数据集上取得了更高的关键点定位精度。在引入人脸关键点之间的结构信息后,沙漏网络的泛化性能有明显提高。但是,沙漏网络应用于人脸关键点检测时还存在结构复杂、时间开销大等问题。为了进一步降低网络的复杂度和参数量,论文引入了知识蒸馏的策略,在保持网络泛化能力的同时训练一个参数量更小轻量级网络。知识蒸馏的原理是通过一个复杂度和参数量大但鲁棒性强的教师网络,通过有监督学习训练出泛化性能较强的轻量级的学生网络。我们把鲁棒的AGCFN当做教师网络,学生网络的结构和教师网络一样,但是网络深度减少到只有教师网络的一半。通过知识蒸馏的学习策略,将鲁棒的教师网络的关键点结构知识传递给轻量级的学生网络,使学生网络能够以较低的计算成本进行快速的训练。此外,为了进一步降低学生网络的参数量,深度可分离卷积被用来取代标准卷积来降低计算量。与最新的人脸关键点检测方法相比,轻量级的学生网络在参数量下降巨大的情况下,仍然能在权威的300-W数据集上也取得了较高的人脸关键点定位精度。综上所述,本文首先通过沙漏网络和注意力机制训练一个教师网络模型,这个模型在应对各种场景的人脸时较为鲁棒,然后通过知识蒸馏的策略将鲁棒的教师网络的关键点结构知识传递给轻量级的学生网络。实验证明,通过知识蒸馏策略,轻量级的学生网络在常用的数据集上也取得了很有竞争力的表现。
其他文献
冷链在我们的日常生活中越来越起到非常重要的作用,但是在现阶段要对易腐货物进行全程监控却比较困难,本文通过冷链管理操作原则,充分了解冷链企业所面,临的困难。作者通过介绍RF
本文着重从企业基层党组织结合党建工作实际,积极探索共产党员发挥先锋模范带头作用的有效方法和途径,引导广大党员在企业发展中充分发挥先锋模范作用,体现党员先进性,是基层党组
“品牌之魂”是:诚信、创新、敬业,“品牌推广艺术”指的是在推广品牌过程中加入创造性成分的活动。本文阐述了品牌与品牌创新的内涵,重点分析品牌创建与推广艺术问题。
领导力由四个层面组成:一是执行力和学习力; 二是人格魅力;三是胸怀与眼界;四是理想与信念。四个方面的重要性呈递增趋势。笔者特地绘制了模型图来表现这种结构,并将之称为领导力
土家族教亲思想主要是指善待父母,它的核心内涵是“顺”与“思”。忠君也是土家族教亲思想的重要方面,它是土家孝亲思想的扩展。土家族孝亲思想本质上一种生命意识,它是生命意识
随着市场竞争加剧,制造业的生产服务模式逐步向大规模个性化转变,越来越多的企业注重以用户体验为导向,将产品与服务组合成产品服务系统(Product Service System,PSS)以提高核心竞争力。人工智能时代,智能终端设备发展迅速,尤其是智能手机已经超越本身基础功能逐步成为最具普适性的生活工作必需品。如何根据用户需求实现智能手机PSS的高效配置,成为智能手机制造和服务商关注的核心问题。PSS
中国的音乐选秀类节目以互动参与度高、娱乐性强,还有极具真实性和故事性的特点,竖起综艺类节目的一面大旗。《超级女声》和《中国有嘻哈》是这类节目中早期和近期最具影响力
实践教学对高职院校投资与理财专业的学生具有特别重要的作用。但目前的教学模式恰恰忽视了应用性。本文探讨了高职院校投资与理财专业教学模式的改革,认为专业教学应重视实