基于双流卷积网络的运动想象分类研究

来源 :北京交通大学 | 被引量 : 0次 | 上传用户:brxdq
下载到本地 , 更方便阅读
声明 : 本文档内容版权归属内容提供方 , 如果您对本文有版权争议 , 可与客服联系进行内容授权或下架
论文部分内容阅读
运动想象作为脑机接口的重要应用之一,是运动康复训练的重要支撑,在军事、交通、娱乐等领域也有着广泛的应用前景,所以对运动想象的准确分类具有重要意义。不同运动想象的脑电信号在时域、频域和空间域上存在显著差异,然而当前运动想象分类研究大多只考虑了某一维度或者某两维度的信息,无法全面捕获脑电信号的内在特征;而且脑电信号所携带的信息并非同等重要,现有方法无法自适应地捕获所有维度中最有价值的信息;此外,基于深度网络的分类模型在识别脑电信号时需要大量的内存、计算量和时间开销,无法部署到有限计算能力的移动医疗设备中。因此,本文针对上述问题,提出双流框架去同时表示脑电信号的时-频-空信息,设计出两种运动想象分类算法和一种模型压缩方法,主要研究内容如下:(1)提出了一种基于双流图表示的运动想象分类模型。该模型根据脑电电极分布的非欧特性,利用图结构表示脑电空间,同时将脑电信号的时域信息和频域信息分别映射到图中,形成时-空流和频-空流的双流图表示;设计出时间、频率、空间注意力机制自适应地捕获时、频、空维度中最有价值的信息;引入图卷积得到基于注意力机制的双流图卷积网络(TAGCN),从双流图表示中提取空间相关性、时间依赖性和频率依赖性。在三个公开脑机接口数据集上进行了大量实验,结果表明TAGCN优于现有分类方法,验证了TAGCN在运动想象分类中的有效性。(2)提出了一种基于双流三维表示的运动想象分类模型。该模型根据电极之间的相对分布排列,利用矩阵结构表示脑电空间,得到时-空流和频-空流的双流三维表示;并针对三维数据设计出时-频-空串联注意力机制和并联注意力机制,都能自适应地捕获所有维度中最有价值的信息;结合注意力机制和三维卷积设计出基于注意力机制的双流三维卷积网络(TA3D)对运动想象进行识别。在三个公开脑机接口数据集上进行了大量实验,结果表明TA3D显著优于现有分类方法和TAGCN,且并联注意力机制的性能要优于串联注意力机制。此外,通过对模型内部结构的可视化分析,进一步解释了TA3D模型的有效性。(3)提出了一种基于知识蒸馏的分类模型压缩方法。本文设计出一个轻量级网络,基于知识蒸馏的思想令轻量级网络去批判性地学习TA3D输出的概率分布,实现知识迁移和压缩。通过实验证明经过知识压缩后的模型不仅拥有较高的分类性能,还具有较小的占用内存、计算量和时间开销,促进了深度网络在可穿戴医疗移动设备中的部署,为未来的实际应用提供了新思路。
其他文献
中国已步入“十四五”的发展新征程,“2030年前与2060年前先后实现碳达峰目标与碳中和愿景”被列为“十四五”时期着力推进的一项重点工作。作为最大的发展中国家,中国仍处于发展的重要战略机遇期,发展不平衡、不充分的问题较为突出,在应对气候变化方面也存在一些欠缺和短板,加之国际形势日趋复杂,要实现“碳达峰目标”与“碳中和愿景”,需要付出艰巨的努力。因此,实现国家整体减排目标,不仅需要重视全国经济、产业
气体传感器在工业制造、医疗诊断、国防、环保等众多应用领域发挥着至关重要的作用。二氧化硫(SO2)作为一种主要的大气污染物,其浓度检测是气体传感领域的重点研究方向之一。本文提出了一种基于还原氧化石墨烯(reduced Graphene Oxide,r GO)场效应管(Field Effect Transistor,FET)型的SO2气体传感器,采用r GO与二氧化钛(Ti O2)纳米颗粒复合薄膜作为
随着互联网技术的发展,金融领域开始走向互联网化[1]。金融是一个和资金往来有着密切联系的行业,因此在金融互联网化的过程中,面临着诸多资金安全问题。同时,随着用户量的激增,系统的数量越来越多、复杂程度越来越高,系统之间的调用关系也逐渐复杂,一个环节的调用失败就可能引起一连串的雪崩问题[2]。因此,系统的稳定性建设问题亟待处理。基于上述现状,基于混沌工程理论来构建演练系统逐渐成为一种主流的解决方案[3
近些年,我国港口行业发展迅速,港口群成为港口发展的趋势。我国已经形成五大港口群,在长期发展下港口群出现了港口吞吐能力过剩、港口岸线设施资源浪费以及同质化竞争严重等问题,交通部以及政府部门也在尝试推进港口的资源整合,推动区域内港口间的相互合作。本文主要研究港口群的竞合问题,并以珠三角港口群为例进行具体分析。本研究的目的是:以网络作为基本视角,通过对港口群竞合网络的构建与分析研究,探寻核心港口在该港口
组玉佩又称全佩、大佩,是由多件不同种类的玉佩饰在礼制规范下,按一定规律穿系而成的大型玉佩饰,其多样的款式,复杂的结构,明显的尊卑关系,都象征着各贵族阶层的身份和地位。西周是我国礼制最鼎盛的时期之一,符合礼乐文化制度且器型较大、形制复杂的组玉佩在此历史环境下应时而生。战国组玉佩是在西周组玉佩的基础上发展起来的,并将组玉佩礼制观念与人的行为联系起来,成为我国古代装饰玉中最为独特的一个类别。随着近现代生
近年来随着高铁建设的不断推进,我国高铁发展已进入网络化阶段,旅客的出行需求得到了进一步满足,出行选择也不断丰富。然而由于客流需求的复杂性与波动性,现阶段固定的票额分配与票价制定策略难以满足日益增长的出行需求,客票需求与供给的不匹配成为了阻碍高铁运营能力提升的关键因素。本文从旅客选择行为入手,在同OD多列车出行选择中,通过构建仿真流程引导旅客进行二次选择,研究各OD上票额与票价的组合优化方法,建立多
随着我国铁路快速发展,运营里程不断提高,高速铁路的运营安全问题愈发受到重视。而由于铁路沿线基础防护措施不健全,导致异物入侵事件常有发生,严重威胁国家财产及人民生命安全。因此,实现准确、及时地铁路异物入侵检测十分必要。现有的异物入侵检测方法在抗干扰能力或检测精度等方面存在缺陷,故本文提出了一种基于深度学习理论的铁路异物入侵检测方法,旨在及时预报安全隐患,提高列车运营的安全水平。铁路场景中入侵异物多为
铁路是我国重要的交通设施,是我国经济发展的大动脉。轮对作为机车关键走行部件,其故障严重威胁着铁路和城市轨道交通的运行安全,因此,研发实时、高精度、适应性强的轮对智能监测设备是非常重要的。由于轮对光条图像的采集是在室外动态进行,受到环境干扰等影响,图像中会出现光斑和局部断裂,因此,需要构建图像修复模型去除光斑修复断裂,还原图像中的光条纹理。目前,深度学习在如人脸、室外场景等RGB开放数据集上的图像修
光子晶体(Photonic Crystals)是近年来发展起来的一种可在物理结构层面上高度有序设计的新型超材料。光子晶体可以控制光流,提高光与介质间的相互作用,使得其在诸多领域均有广大的应用前景。其中在传感领域,将具有响应的传感介质置于光子晶体中,赋予其可调谐的光子带隙,可以制得针对各种外界信号源(温度、压力、气体等)的光子晶体传感器。从制作层面而言,基于薄膜光学的一维光子晶体由于其制作简单、工艺
铁路周界异物入侵检测系统是增强铁路安全管理必不可少的监控手段之一。由于我国铁路里程长、铁路网面积大,加之其与人类、动物活动区域重合,导致其面临人类、动物造成的周界入侵威胁。目前,使用基于视频监控的周界入侵行为检测是较为理想的解决方案。但由于高速铁路网络过于庞大,使用人工视频监控的方式不仅效率低下,成本也过于高昂,且室外铁路视频监控将不可避免的受到极端天气的影响,导致视频图像质量下降,这对于检测任务