基于多模态深度学习的疲劳驾驶检测

来源 :上海交通大学 | 被引量 : 0次 | 上传用户:fmklsdfjds
下载到本地 , 更方便阅读
声明 : 本文档内容版权归属内容提供方 , 如果您对本文有版权争议 , 可与客服联系进行内容授权或下架
论文部分内容阅读
随着便携式生理信号采集设备、信号处理算法以及机器学习算法的发展,脑电信号和眼电信号已被成功地应用于疲劳驾驶检测。本文提出一种融合部分脑区脑电信号和前额眼电信号来进行疲劳驾驶检测的方法。我们设计并进行了疲劳驾驶的模拟实验,同时采集被试的脑电、眼电和眼动数据。本文对信号融合时不同脑区脑电信号的效果进行了研究,确定了疲劳驾驶检测时,信号融合的关键脑区。实验结果表明,颞叶区的六导脑电信号和前额眼电信号结合,能够最有效地学习出多模态的共享特征表达。进一步,本文提出了一种基于深度自编码器模型的多模态信息融合策略来学习多模态特征。我们针对22名不同被试,使用多模态算法模型和单模态的算法进行疲劳驾驶检测。本文提出的算法取得了良好的检测结果,预测疲劳状态与实际疲劳状态的相关系数为0.85,均方根差为0.09。实验结果表明,利用本文提出的多模态特征融合算法对脑电和眼电信号进行融合,能够学习到有效的多模态共享特征,并提升疲劳驾驶检测效果。
其他文献
目的:探讨点阵CO2激光治疗兔耳增生性瘢痕中P物质的变化情况。方法:建立兔耳增生性瘢痕模型,点阵CO2激光治疗后,免疫组化检测P物质的表达。结果:点阵CO2激光治疗后第1天P物质表
介绍了一种被动式液压升沉补偿装置,并对其进行了动力学仿真分析,得出的结论可以为深海采矿作业提供理论基础。 A kind of passive hydraulic heave compensation device is i
黄淮海平原一年两熟制的夏大豆区,由于长期种植大豆,重茬现象很严重,表现为植株矮小、生育迟缓、病虫害较多、荚少粒小,显著减产。播种期的6月份正值“三夏”大忙季节,为抢农时、
目的:比较Kwak等2011年制订的甲状腺影像报告和数据系统(简称Kwak TI-RADS)、美国放射学院2017年颁布的甲状腺影像报告和数据系统(ACR TI-RADS)和美国甲状腺协会2015年颁布的甲状腺结节恶性风险分层指南(简称ATA指南)对甲状腺结节的诊断价值。方法:对457例甲状腺结节患者(共计504个结节)的术前超声图像及报告进行回顾性分析,并将结节分别按照三种分类标准进行分类。以手
针对常规抽油泵存在间隙漏失和在含砂、结垢油井中使用易卡泵的问题,设计了一种新型组合柱塞防卡抽油泵.这种抽油泵的柱塞密封段采用弹性的金属密封环与软密封环组合,柱塞上
安徽省歙县三阳镇岭脚村,位于歙县的东大门清凉峰国家级自然保护区的昱岭关脚下,有林地面积2299公顷,其中防护林面积1414.3公顷,商品林面积884.7多公顷。三阳镇岭脚村与浙江
重点介绍了专家库信息建设的要点、阶段和注意事项。
基于2008—2016年青海海北站9年净初级生产力及气候因子监测数据,分析了青藏高原高寒小嵩草草甸和高寒金露梅灌丛两种植被净初级生产力年际动态,并探讨了气候因子对其影响及
针对循环流化床锅炉(CFBB)燃烧系统非线性、约束、多变量耦合等过程特性和多目标燃烧优化要求,提出一种无终端约束字典序经济模型预测控制策略。基于字典序多目标优化思想,将