基于深度学习的人脸微表情识别研究

来源 :哈尔滨工程大学 | 被引量 : 0次 | 上传用户:winningking
下载到本地 , 更方便阅读
声明 : 本文档内容版权归属内容提供方 , 如果您对本文有版权争议 , 可与客服联系进行内容授权或下架
论文部分内容阅读
人脸微表情识别已经成为工智能与模式识别领域的研究热点。人脸微表情是人的内心情绪的真实表达,研究人脸微表情可以使机器更好的理解人的情感信息,在人机交互中更好与人沟通,帮助人们工作。本文在表情识别基础上研究对更加细微的表情的识别,将微表情分七类:高兴,悲伤,惊讶,厌恶,恐惧,痛苦,中性。微表情变化一般不超过0.25s,对微表情视频流的研究要比单张图片更能表达的人的情绪。所以,本文结合深度学习对视频人脸微表情提出了一些新的方法,并进行了实验。本文主要的工作:  1.建立微表情数据库。首先建立了适合本文提出的网络模型的样本数据集,分为彩色及灰度人脸微表情数据集,在微表情视频序列中截取12帧作为单人一个表情的序列长度。  2.本文提出了用深度学习的卷积神经网络对视频人脸微表情进行识别的方法。每次将三张微表情图像同时送进卷积神经网络,每次移动一个步长,这样构建的网络就能保证同时视频微表情序列。在本文的数据库上不同的卷积网络模型都取得很好的实验结果。  3.同时送进卷积神网络虽然同时输进了样本序列,虽然也对全部序列进行了识别,但忽视了时间的特性,并且计算量大。本文利用递归神经网络能对时间序列特征进行有效的处理,将其与卷积神经网络组合提出了一种CNN-LSTM的网络模型,实验表明这网络模型可以出每一个时间点的识别结果,并且有很好的分类性能。  本文的两章实验是分别在深度学习框架Caffe及TensorFlow上进行网络搭建实验的,这两种框架对深度学习有良好的促进作用,并有可视化工具。经实验可知,本文的两种深度学习模型对视频微表情序列比其他算法更有优势,效果更好,实用性更高。
其他文献
随着数字图像处理的应用领域不断扩大,数字图像实时处理技术成为研究的热点。VLSI技术的迅猛发展为数字图像实时处理技术提供了物质基础。其中FPGA (现场可编程门阵列)的特点
童星(南京大学教授):从贫困产生原因的分析切入,可以将我国的贫困治理分为3个阶段.新中国的前30年是贫困治理的第一阶段.当时在农村实施土地改革,在城市实行“广就业、低工资
期刊
华建敏(中国社会保障学会名誉会长、第十一届全国人大常委会副委员长):对新中国社会保障70年的发展,我有3个层次的认识.rn首先,要深入研究中国社会保障的历史经验与国际经验,
期刊
郑功成(中国人民大学教授):回顾新中国成立70年来的社会保障发展历程,可以获得如下历史启示.rn新中国的社会保障发展是两个高潮和中间不断探索的连续性进程,且探索还在进行中
期刊