眼动跟踪技术研究及其在驾驶环境中的实现

来源 :济南大学 | 被引量 : 0次 | 上传用户:glory001
下载到本地 , 更方便阅读
声明 : 本文档内容版权归属内容提供方 , 如果您对本文有版权争议 , 可与客服联系进行内容授权或下架
论文部分内容阅读
眼睛是人类获取信息和感知外部世界最重要的方式之一,它可以从外部世界获取大约83%的信息,眼睛的运动状态反映了人的视觉注意力,通过眼睛可以分析人的意图,了解人的行为。眼动跟踪技术是通过提取眼睛相关信息来捕捉人眼的运动状态,进而能够分析出人的注意力、意图等的一项技术,是推断人类注意力的重要线索。近几年,眼动跟踪技术快速发展,已经成为计算机视觉领域一个重要的研究课题。目前,汽车的数量越来越多,道路拥挤越来越严重,交通事故发生率越来越高,造成大量的人员伤亡和巨大的经济损失。有关资料显示,驾驶员在驾驶过程中注意力不集中的行为是导致交通事故发生的主要原因。而通过对眼动行为的跟踪,可以进行驾驶员注意力状态的分析,因此,在驾驶安全、驾驶辅助领域,驾驶员眼动跟踪技术成为近年来研究的一个热点,引起了国内外研究人员的广泛关注。一般来说,眼动跟踪技术的实现方法分为两类,一类是基于特征的方法,一类是基于外观的方法。相比于基于特征的方法,基于外观的方法在眼动跟踪之前不需要定标过程,眼动跟踪过程更加自然、灵活,近年来随着深度学习的发展,驾驶环境下基于外观的眼动跟踪研究吸引了越来越多研究者的关注。本论文以汽车驾驶为应用场景,利用深度学习技术对驾驶员眼动跟踪技术展开研究,主要工作内容包括:首先对桌面式眼动跟踪进行了研究,提出了一种基于GoogLeNet的桌面式眼动跟踪算法;其次,利用深度学习技术对驾驶员眼动跟踪进行了研究,并设计了面向驾驶环境的眼动跟踪系统。本论文的主要创新点概括为以下三个方面:(1)提出了一种基于GoogLe Net的桌面式眼动跟踪算法。首先,利用Kinect采集用户桌面环境下眼动视频,并利用图像处理技术获取左眼和右眼图像,构建桌面环境下的眼动数据集;然后,利用GoogLeNet进行眼动跟踪深度网络模型的设计,对GoogLeNet网络进行微调,并通过对网络中最后一层平均池化的卷积核大小的调整,来减少网络参数。实验结果表明,该方法提高了网络模型的训练精度,训练得到的网络模型的眼动识别精度为92.4%。(2)提出了一种基于多通道卷积神经网络的驾驶员眼动跟踪算法。利用普通摄像头采集驾驶员驾驶过程中的视频,然后提取驾驶员左眼图像、右眼图像和脸部图像,利用这些图像数据构建驾驶环境下眼动数据集。基于多通道卷积神经网络,本文提出了面向驾驶环境的眼动跟踪深度网络模型,利用多通道卷积神经网络分别提取左眼图像特征、右眼图像特征以及脸部图像特征,并将三个网络通道所提取的特征融合,最后利用分类器得出分类结果。训练得到的深度网络模型,对驾驶环境下驾驶员头部偏移量与视线角度均具有鲁棒性,眼动跟踪精度为94.6%。(3)在上述研究基础上,开发完成驾驶环境下驾驶员眼动跟踪系统。该系统可以检测驾驶员的面部关键区域,并利用本文提出的基于多通道卷积神经网络的驾驶员眼动跟踪算法实现驾驶员注视区域的定位。同时,该系统还能够对驾驶过程中驾驶员不同区域的注视时间进行记录与统计,为驾驶行为分析、驾驶辅助等研究提供数据支撑。
其他文献
图像抠图方法指的是对目标对象进行准确的前景估计,从而实现前后背景信息的分离。传统的图像抠图方法一般是结合彩色图像以及人工辅助信息进行求解,其核心为以下两点:1)人工
荧光半导体材料,尤其是无金属元素的强荧光半导体材料,在很多领域如量子器件和生物医药中都有着广泛的应用。目前研究的较多的无金属元素的半导体材料是碳基材料,主要包括碳
镁合金作为“21世纪绿色环保材料”之一,在实现材料轻量化、节能环保等方面有显著作用。传统镁合金(AZ系、AS系)已普遍应用于飞机、汽车零部件,但与此同时镁合金较差的耐磨性
随着科技的发展、社会的进步,高校面临的环境也在不断变化,我国高等教育事业的发展进入前所未有的新局面。随着高校教学活动变得越来越复杂,学校资金来源的方式日趋多样化,与
隧道中行人目标的快速准确检测对保障隧道交通安全有着重要作用。相比于传统的机器学习检测算法卷积神经网络可以自动学习图像丰富的特征,具有较强的特征提取能力,基于卷积神
现如今,随着老龄化加剧,我国老年人口数量已经超过2亿,约占世界老年人口总数的1/4。庞大的老年人口数量给社会经济、医疗卫生等都带来了空前的挑战,提高老年人健康体适能显得
人脸识别技术以其非接触性和便捷性的特点,近年来已被广泛应用于军事、经济、公共安全等领域。目前,绝大部分的人脸识别系统能够识别输入人脸图像的身份,但无法准确辨别输入
时间序列预测作为一项有挑战性的任务,吸引了许多领域的研究人员深入研究。现阶段,有很多新的时序预测模型被提出,同时现有的模型也不断被修改。这些研究的目的都是为了达到
雷电脉冲威胁着通信基站的稳定运行,雷击作用下通信基站杆塔的精确电气参数,是针对通信基站设备抵御雷击能力分析研究中的重要电气参数依据,对精细化基站设备防护规格的制定
混凝土砌块具有质轻、高强及良好的隔热保温等优良特性,已经成为应用广泛的建筑材料之一,但是混凝土砌块的耐高温性能较差,利用CO2气体养护混凝土砌块,CO2能够与水泥颗粒及水