结合BubbleView与ERP的人机交互图形界面评价方法

来源 :厦门大学 | 被引量 : 0次 | 上传用户:loveaudio
下载到本地 , 更方便阅读
声明 : 本文档内容版权归属内容提供方 , 如果您对本文有版权争议 , 可与客服联系进行内容授权或下架
论文部分内容阅读
在人机交互等领域,图形界面的可用性、合理性决定了操作员的工作效率,因此提出一种客观的、可靠的图形界面评价方法势在必行。本文以头盔显示界面(Helmet Mounted Display,HMD)为研究对象,不但提出了一种图形界面的评价方法,而且还基于脑电(Electroencephalogram,EEG)提出了一种认知负荷状态分类方法。我们的工作共分为两个部分:1、提出了一种将BubbleView与ERP结合鲁棒性更强的图形界面评价方法。由于前人的工作大多仅通过一种方式评价图形界面,即要么仅借助事件相关电位技术(Event Related Potentials,ERP)要么仅借助眼动追踪技术,单独借助眼动追踪技术带来的缺陷是无法揭示认知评价过程中大脑内部的工作机制,并且眼动追踪技术涉及的设备昂贵且需要调试,单独使用ERP技术带来的缺点是无法反映界面评价过程中的人眼注视规律。为了克服以上工作的不足,我们通过研究用户从注意力资源投入到分配完整的认知过程来综合评价图形界面。我们借助ERP结果中的P2、P3b成分来反映被试在图形界面下注意力资源的投入量,借助BubbleView生成的视觉重要性热图来反映被试注意力资源的分配情况。最后,我们综合ERP、BubbleView结果对不同布局的图形界面进行讨论分析,得到较为客观的评价结果。结果显示在更加简洁布局的界面下,被试的认知负荷更小。通过BubbleView的视觉重要性热图,我们还发现用户更加关心图形界面的上部区域。2、提出了一种脑电时空多特征融合的图形界面下的认知负荷分类方法。该方法利用 Multi-CNN(Multi-Convolutional Neural Networks,Multi-CNN)提取EEG的频域与空间特征,然后利用Att-BLSTM(Attention Based Bidirectional Long Short-Term Memory Network,Att-BLSTM)提取原始 EEG信号中的时域特征,最后通过多特征融合构建认知负荷分类方法。实验结果表明该方法在该数据集上的测试结果平均准确率82%,相对于传统机器学习的方法,该方法具有更强的EEG信号表征能力,相对于其它深度学习的方法,也更能准确提取EEG的时域特征且具有更强的鲁棒性。本文的研究结果揭示了不同图形界面布局方式对被试认知负荷的影响,对于设计优化图形界面提供了理论依据和新的思路,同时我们的图形界面评价方法不仅限于HMD界面,也可为其它类型图形界面提供设计帮助。我们提出的脑电时空多特征融合的图形界面下的认知负荷分类方法可以实现对低、高认知负荷状态进行精确的分类,有助于实现认知反馈机制最终提高工作效率。
其他文献
小样本学习是元学习的研究在监督学习方向的分支。元学习是模型学习如何学习的能力,小样本学习使用元学习方法自动学习如何在只能获得很少量数据的情况下正确的学习。本文的工作在模型设计和数据处理两个方面展开。模型的设计考虑到使用将模型参数限制在低纬度的空间内的方式来控制模型的学习过程,而该空间的建立又与遇到的当前任务相联系。我们将这个方法命名为解码器选择网络(DNC,Decoder Choice Netwo
遥感图像目标检测在民用、军事以及其他领域有着举足轻重的作用,然而由于遥感图像具有尺寸大、目标小且密集、目标呈任意角度分布、目标易被遮挡、目标类别不均衡、背景复杂等诸多特点,遥感图像目标检测仍然是极具挑战的任务。近年来,基于深度卷积神经网络的遥感图像目标检测方法因具有精度高、处理速度快等优点,受到了越来越多的关注。本文将任意方向的文本检测网络——旋转区域卷积神经网络(Rotational Regio
在目前的电子产品市场上,Flash存储器受到便携式电子设备的广泛青睐。Flash存储器存储数据的主要工作机制需要依靠沟道热电子注入效应(CHEI)和量子隧穿效应(FNEI)来实现,而这两种操作的实现需要高电压来完成。由于Flash采取单一电源供电,并且考虑到低电源电压以及小型化的要求,需要在Flash内部设计一个用于产生高压的模块来提供CHEI以及FNEI所需要的高电压。电荷泵由于其面积小、不需要
地质勘察行业承担着为国家开发和勘查自然资源的重任,它是我国国民经济的基础产业。当前,公益类事业单位的分类随着我国事业单位分类改革的不断深入而越来越明确,组织内资源重组是发展趋势,但目前部分地勘单位的绩效考核的形式以及考核方法等却显得滞后,原有的考核制度限制和阻碍了人才培养和人员流动。地勘事业单位绩效考核是激发单位人才队伍活力、提高事业单位工作人员工作积极性及工作质量的重要措施,也是现代地勘类事业单
近年来,为了在保证数据可用性的前提下提高内存空间效率,纠删码已逐渐被应用到数据密集型内存集群中来存放数据。当进行内存空间回收时,因为条带中同时存在冷热数据分块,冷数据分块不能及时淘汰出内存,导致内存空间利用率低,影响系统响应性能。针对此,对纠删码集群内存空间回收方案进行研究。为了提高内存空间利用率和系统访问性能,提出了一种关联性感知的内存空间回收方案(Correlation-aware Memor
过渡金属催化的C-Cσ键官能团化反应是高效快速实现C-C/C-X(X=C、N或O)键转化的有效途径,但因这类化学键周围密集分布着不同化学键及其本身热力学稳定性较高往往导致C-Cσ键难以活化。吲哚类化合物尤其2-羰基吲哚类化合物是很多天然产物、生物活性分子的核心骨架,该类化合物还可衍生为具有药用活性的含吲哚骨架稠环化合物,因此发展过渡金属催化的吲哚C-2位Csp~2-Csp~3σ键羰乙基化反应具有重
水声通信环境多径效应严重,传输时延长,受到干扰攻击的威胁,导致接收信号质量严重下降甚至通信中断。水声通信中继技术提高抗干扰能力,其中继发射功率等策略的优化方案取决于水声信道模型和干扰攻击策略等时变因素,显著影响水声通信的误码率和能量损耗等性能。因此,论文采用博弈论和强化学习研究水下通信抗敌意干扰中继技术,增强水下通信的抗干扰能力,提高水下通信质量,延长水下传感网的生命周期。首先,论文采用前景理论建
水煤浆和油水煤浆是新型煤基洁净燃料,相关技术应用具有环境保护和能源效益的双重意义。水煤浆和油水煤浆的热解是燃烧和气化反应过程的第一步,是煤的清洁利用的基础,因此研究水煤浆和油水煤浆的热解具有十分重要的意义。基于此,本文利用高温管式炉,针对水煤浆和油水煤浆,在不同条件下开展了热解实验研究,并对热解后煤焦的结构及燃烧特性开展进一步研究;通过经典分子动力学软件Lammps对煤中主要含氮结构吡咯和吡啶在N
在边境管控以及部分军事行动中,对重点区域的监控都是人工作业来完成。现有的小型侦察设备集成度低、体积庞大,且目标需要人的判读,不能满足实用需求。因此,设计一套便携式且可自动实现目标检测的全天候侦察监视系统对于增强对重要目标区域管控能力、有效获取战场信息具有十分重要的意义。基于红外信号的便携式侦察监视系统的核心是从红外信号中实时检测出行人目标,深度学习目标检测算法在速度与准确率上都有着突出表现,这为侦
随着社会经济的高速发展,人力资源已成为现代企业发展的第一资源,企业如何在激烈的人才竞争中取得优势成为备受瞩目的话题。招聘工作的质量关系到企业能否吸纳到合适的员工来搭建企业的人才队伍。从当前的情况来看,国内的企业急需专业能力强、综合素质高的员工,如何把握好企业发展的战略机遇期,建立科学合理的招聘体系、做好招聘各个环节的工作以招聘到合适的员工,成为增强企业竞争力的关键。本研究的对象G公司是一家智能装备