基于课程学习和度量的面部表情识别方法研究

来源 :山东大学 | 被引量 : 0次 | 上传用户:zhoukang3201
下载到本地 , 更方便阅读
声明 : 本文档内容版权归属内容提供方 , 如果您对本文有版权争议 , 可与客服联系进行内容授权或下架
论文部分内容阅读
情感理解作为人机交互的基础,在服务机器人领域吸引了越来越广泛的关注。面部表情识别作为情感理解最直接的方式之一,目前仍然存在两个尚未解决的难题:其一,在大量样本训练下的模型泛化性能低,且单一模型对七种基本表情识别能力不一;其二,模型优化所需样本量大,有标签数据较难获取以及图像标注耗时耗力等。针对以上两个问题,本文提出了基于课程学习和度量的面部表情识别方法,对上述两个难点问题进行了深入研究。针对表情识别模型泛化性能低的问题,提出了一种基于课程学习的面部表情识别方法,该方法分为课程设计和课程学习两个阶段。在课程设计阶段,利用Density-Distance非监督聚类方法将七种表情以6:2:2的比例分成复杂程度不同的三个子集;在课程学习阶段,提出Adding和Replace两种方式逐步增加训练集的复杂程度,并通过Replace的方式证明划分子集的准确性与合理性;针对单一模型混淆矩阵欧式距离分析,难以准确识别愤怒、恐惧和悲伤表情的问题,提出自选择机制(Self Selection Mechanism,SSM),对这三种表情进行二次判断。通过实验证明,本文提出的面部表情识别方法分别在开源数据集FER-2013和CK+上取得72.11%和98.18%的最优结果。此外,研究了表情识别服务的云端部署和调用问题,对云服务的准确度和服务时间进行了测试,测试结果表明该云服务能够满足服务机器人实时性要求。针对面部表情模型训练所需样本量过大、有标签数据较难获取以及图像标注耗时耗力的问题,提出了一种Prototype-Relation网络架构,将图像分类问题转化为最近邻问题,对少样本学习的损失函数进行改进,以正则化项的形式类内聚合损失。整个模型优化采用Episode-based的方式,构造7-way K-shot的训练场景。在FER-2013数据集上的实验证明:在数据量分别为100%、80%和60%的情况下,引入类内聚合损失后,模型精度均得到不同程度提升,当正则化项λ=0.3时取得最优识别效果;通过进一步探索Ktest与Ktrain的相对大小关系,证明在Ktest>Ktrain时,仅利用65%的数据量即可达到原先利用100%数据量的识别精度,数据量减少35%,达到少样本学习的目的。
其他文献
如何充分挖掘商品图像中蕴含的信息,构建用户需求的预测方法,是个性化推荐系统研究的重要问题。库存作为用户购物环节的影响因素,直接决定了用户是否能够购买到心仪的商品。
我国部分海底管道设备已逐步进入老龄化阶段,其作为海底石油、天然气的主要运输载体,由腐蚀因素造成的管道损伤是其剩余寿命减少的主要原因,使得对其进行再次检修的难度与费
无线传感器网络(Wireless Sensor Network,简称WSN)是由微型无线传感器节点通过自组织的方式形成的网络,通常用来执行通信、监测、定位和追踪等任务,被广泛应用于农业监测,灾
伴随着互联网技术、智能手机的高速发展,电子商务发展日新月异,开始深刻影响着我国商业银行的各项业务,使商业银行面临巨大生存压力,也迎来了改革机遇。商业银行为了抓住机遇
大底盘双塔结构具有新颖的建筑造型和多样化的使用功能,能够满足业主的使用要求,体现设计师的设计个性,近年来在实际工程中得到越来越多的应用。但是此类建筑结构由于其受力极其复杂,在地震作用下的扭转效应较大,其破坏更加严重。以往的地震灾害也表明,复杂的超限高层建筑结构容易发生破坏甚至出现整体倒塌。所以研究其抗震性能,确保在不同地震作用下结构的安全性尤为重要。本论文选取天水某大底盘非对称双塔超限高层结构为研
冲压作为汽车生产的四大工艺之一,一直都是汽车制造厂家非常注重的生产环节。由于冲压生产环境的特殊性,需避免压力机与自动化设备的碰撞,使得人们对生产工艺规划的安全性及
众所周知,云计算自90年代末被提出以来,凭借着对延迟和网络抖动不敏感的大规模批处理业务适用的优势,很快成为了各行各业竞相争夺的科技制高点和财富宝地。然而,随着接入无线
近年来我国实行金太阳工程等一系列光伏补贴优惠政策,受政策影响,几年来我国的光伏发电项目呈爆炸式发展。截止2016年底,我国的光伏发电项目已累计装机77.42GW,这一时期是我
近年来,我国经济发展越来越快,旅游业的发展对土地的需求也越来越大,因旅游业发展而产生农民失地现象也越来越多。这些失地农民受年龄、受教育程度、生活习惯、就业等因素的
KDP晶体主要应用在惯性约束激光核聚变和固体激光器系统中,但KDP晶体具有脆性低、易潮解、各向异性和对温度敏感等特点,是世界上公认的典型难加工材料。目前主要使用单点金刚