基于RealSense的在线教育表情识别研究及应用

来源 :华中师范大学 | 被引量 : 0次 | 上传用户:aineast
下载到本地 , 更方便阅读
声明 : 本文档内容版权归属内容提供方 , 如果您对本文有版权争议 , 可与客服联系进行内容授权或下架
论文部分内容阅读
在线教育是教育信息化和终生教育的重要途径,也是个性化教育发展的途径之一。在线教育依托互联网、计算机等技术和手段,引发了教育观念和教育模式的重要转向和深刻变革,但是,在线教育使用中仍然存在不足,尤其是师生交互方面。由于在线教育具有时空分离等特点,学习者和教师在线学习过程中无法实现情感交流,从而导致学习者的情感缺失。这些缺点会影响在线教育的学习效率,以及学习者的认知和心理等。那么,研究如何弥补在线教育中学习者情感缺失,已经成为在线教育领域中亟待解决的问题。在线教育的情感计算强调的是学习者情感信息的实时获取和快速反馈,而在线教育下的学习者表情表现出多样性、复杂性等特点。RealSense实感技术是Intel公司研发的中近距离感知技术,可实时获得人脸特征数据。通过对脸部特征点的数据分析,教师可以实时的获得学生在学习过程中的表情描述,进而与学生进行互动,以弥补师生分离造成的情感缺失,满足在线教育中的情感交互要求。本文的主要工作和创新点包括:首先,在研究分析目前已有的表情数据库在基础上,结合在线教育的特点,建立了一个基于实感技术的表情数据库,该数据库除包含二维RGB图片序列外,还包括对应帧的深度图像,以及整个面部的三维特征点数据。其次,研究光流法表情检测相关理论,通过对大量表情数据的分析,提出了一种基于局部特征点分析的表情检测方法,可以快速地检测到人脸表情。实验结果表明,该方法在保证表情检测准确性的前提下,明显降低了表情数据的冗余。再次,设计并实现了一个基于实感技术的表情识别模型。该模型包括图像预处理、特征提取、分类识别三个环节。其中特征提取采用旋转不变性的LBP特征和基本的RGB颜色特征,将提取的特征放入对多特征融合识别较好的Alexnet卷积神经网络模型进行训练识别。通过对表情数据库的测试结果表明,该方法可以较好的识别表情类别,满足在线教育的要求。最后,设计了一套初步的在线教育情感计算系统模型,并为验证系统的有效性,进行了小规模的实验测试,实验结果表明系统是有效的。
其他文献
螺旋聚苯乙炔是一种动态螺旋聚合物,有着单双键交替的共轭结构,在电学、光学以及生物学领域都有着优良特性。本文分别设计并合成了一系列侧基带有L-环己基甘氨酸衍生物的螺旋
本研究以猪不同类型的细胞为供核细胞,体外成熟去核卵母细胞为受体胞质在体外构建胚胎,建立了体外生产体细胞核移植胚胎的技术体系,为体细胞克隆猪及核移植源胚胎干细胞(ntES
我国目前应用三阶段培训模式或合作学习模式,对我国城市社区护士进行健康教育能力培训,能有效提升社区护士的健康教育能力。但与发达国家相比还存在一定差距,我国应尽快建立
目的:观察太渊穴天灸治疗急性化脓性扁桃体炎1a的临床疗效。方法:在门诊急性扁桃体炎患者中筛选出化脓性扁桃体炎58例,分为两组,对照组33例采用西医治疗,治疗组25例采用太渊穴天灸
Lyapunov-type对称锥规划是基于Lyapunov算子的一类特殊的对称锥优化问题,且包含了Lyapunov-type半定锥规划作为其重要的特例.该类规划问题在最优控制、稳定性分析以及工程设
五年发展看头年。2011年是“十二五”开局之年,也是推动福建科学发展、跨越发展的关键乏年。新一年里,机遇与挑战并存。在强者恒强的区域竞争格局中,福建如何实现后发赶超?
本人受山东省泰安市岱岳区大佛寺耀湛法师委托,翻译《真言宗读本》宗史篇。宗史篇主要涉及佛教显密对辨的教判思想及真言宗的重要传承史即付法相承说,以及弘法大师空海的入佛经历。本报告呈现的翻译成果为宗史篇第一章至第七章的文本内容。本论文分为前言、作者及文本介绍、翻译先行研究、翻译实践分析、总结五个部分。本论文将在第四部分通过对原文文本的翻译实践,着重分析佛教术语及佛经的翻译策略。由于本文为佛教书籍,本人将
【正】谈及周星驰电影,很多人不免产生如下刻板印象:'令人恶心的镜头比比皆是,粗俗,缺乏应有的美感'。(符志刚:《拙劣的'杂烩'——观【唐伯虎点秋香】有感》
随着新课程改革的不断深化,落实教学模式的改革工作,整合教学资源,充分利用现代化教学设备,引入先进的教学理念,是现代化小学语文教学工作的重点发展方向。"作文"作为小学语
“反恐”,无疑是当前国内外公共安全领域热度最高的词汇之一。2009年“7*5”事件后,我国反恐形势进一步恶化,境内外“三股势力”在疆内疆外、境内境外制造了一系列针对政府机