【摘 要】
:
手势是指个体按照主观意识所做出的的手部动作,作为一种肢体语言,它包含了丰富的信息,是一种日常生活中广泛使用的,高效自然的交流方式。而手语动作作为手势的一种,是聋哑人进行交流和沟通的重要途径。然而聋哑人与不了解手语的健全人交流困难,这也一定程度上降低了聋哑人与外界交流的积极性。本文设计了一种交流中对方无需握持摄像头的,基于多传感器和Zynq的手语手势识别系统,能够实现对15种常用手语手势的快速识别,
论文部分内容阅读
手势是指个体按照主观意识所做出的的手部动作,作为一种肢体语言,它包含了丰富的信息,是一种日常生活中广泛使用的,高效自然的交流方式。而手语动作作为手势的一种,是聋哑人进行交流和沟通的重要途径。然而聋哑人与不了解手语的健全人交流困难,这也一定程度上降低了聋哑人与外界交流的积极性。本文设计了一种交流中对方无需握持摄像头的,基于多传感器和Zynq的手语手势识别系统,能够实现对15种常用手语手势的快速识别,具有很高的实时性。本文所设计的系统主要分为两大部分:传感器数据手套和Zynq手势识别系统。传感器数据手套采用以Arduino作为单片机平台,负责控制传感器数据的采集、处理和发送。采用弯曲传感器和惯性测量单元,分别获取五指弯曲程度信息和手部姿态信息,两种传感器的数据共同作为手势识别的依据。同时,在数据发送和接收端加入了CRC-16/CCITT-FALSE校验过程,解决蓝牙模块在数据传输过程中数据丢失的问题。采用BP神经网络作为手势识别算法,并在MATLAB中对识别算法进行建模和仿真。同时,为了高效快速地将BP神经网络硬件化,本文利用High-Level Synthesis技术,将用于识别的BP神经网络实现于Xilinx Zynq SoC的可编程逻辑端,并从资源和时序的角度对比了多种优化方案,得到一种在资源和时序上取得较好平衡的方案。实际结果表明,使用High-Level Synthesis技术能够于更高的抽象层面完成算法设计和实现,在FPGA中可以高效地实现BP神经网络,相较于传统的RTL设计而言,不仅设计周期大大缩短,而且能够取得较好的性能。Zynq识别系统的设计属于软硬协同设计。处理器系统即软件部分,负责顺序执行的数据处理任务,通过蓝牙模块接收传感器数据手套发送的数据,然后通过CRC校验过程保留其中的完整数据,提取传感器数据并进行归一化,并和可编程逻辑共同完成OLED显示工作。可编程逻辑即硬件部分,除了包含了计算量较大且可以并行处理的神经网络外,还分担了处理器系统中执行效率较低的SPI协议,从而提高系统的实习性。在系统运行过程中,处理器系统通过AXI4-Lite总线调用可编程逻辑中的神经网络模块和OLED加速模块,实现软硬件协同工作,完成了手语手势识别和结果显示的工作。实验表明,系统对15种手语手势的识别情况基本达到理论准确率的水平,具有很好的实时性。
其他文献
随着技术和市场的发展,云端、管道和终端设备对数据带宽的要求变得越来越大,这极大地促进了高速收发器在芯片中的使用。但是随之而来的信号完整性问题,成为了新产品开发过程中必须解决的问题。通常工程师在解决信号完整性的问题时是通过商业EDA工具进行建模仿真分析优化,但这会花费大量时间而且在项目前期验证阶段不能快速获取指导信息。快速时域仿真算法的出现解决了这一问题,可以快速地得到链路系统的仿真结果。工程人员在
因其实用价值与研究价值,行人再识别吸引了大量研究者的兴趣。行人再识别技术是从图像搜索领域独立出来的一个研究分支。行人再识别技术在追踪嫌疑人、搜寻失踪人口、人员行为分析等方面能够发挥重要作用,在“平安城市”建设中具有不可或缺的地位,在安防、刑侦、维护公众安全等方面具有非常重要的社会意义和经济意义。行人属性特征是人类在识别行人时非常重要的高层语义信息。在智能视频监控中,行人属性识别起着至关重要的作用,
敬业是社会主义核心价值观个人层面的重要组成部分,工匠精神以敬业为基本特征,敬业观的养成也以工匠精神为主观前提条件,因而培育大学生的工匠精神是培育大学生敬业观的基本途径。同时,职业道德是个人美德的重要组成部分,而工匠精神是职业道德的基本体现,因而工匠精神培育也是职业道德培育的应有之义。工匠精神与高校思想政治教育具有关联性,构成新时代高校思想政治教育目标体系的一项子目标,但实践中一些思想政治教育工作者
Valuation Adjustment Mechanism,中文译作对赌协议,简称VAM。是近年来私募股权投资中炙手可热的词汇,其表现形式主要为股权对赌型和现金补偿型。国内研究成果中大部分指出对
目前国内的航天器舱段对接主要采用传统的“手工为主”装配模式,这种装配模式存在吊装环节多、测量精度低以及工作效率不高等缺点。近年来航天器生产任务不断增长,人员工作强度明显增强,为了提高航天器的装配效率、精度和一致性,迫切需要一种高精度舱段对接装置。因此,本文的研究对象为舱段柔性自动化装配系统中的舱段对接装置。主要研究内容及工作如下:(1)舱段对接装置的机构构型研究。首先通过对舱段的结构特性以及位姿表
无人机由于体积小、成本低、灵活易操作等特点得到各领域的广泛关注,在应急救援、农业植保、军事侦察、地质勘探、环境监测、影视娱乐等行业应用领域需求旺盛。运动目标检测及跟踪是无人机航拍方面研究的基础内容之一,为实现无人机地跟踪拍摄,运动目标的检测及跟踪必不可少。本文采用随机森林(Random Forest,RF)和核相关滤波(Kernelized Correlation Filter,KCF)算法,围绕
研究大学生思想政治教育中的尊重教育,有利于丰富大学生思想政治教育的内容,并进而提高高校思想政治教育的获得感。大学生思想政治教育中的尊重教育以增强大学生尊重人的自觉意识和素养、尊重社会规则的自觉意识和素养、敬畏自然规律的自觉意识和素养为目标。本文采用文献研究法和调查研究法,在借鉴国内外研究综述的基础上,从语义学、社会学、伦理学等多个角度探讨尊重的深刻内涵,尊重作为主体的回应涉及到主体以下四个方面的活
我国正处于经济增长动能转换的重要时期,过去以廉价劳动力,低廉的产品价格和消耗资源与环境为代价来参与国际竞争的方式已逐渐消失,经济增长对创新的需求日益凸显。作为国家创新战略的参与者和践行者,企业的创新投入与国家创新驱动发展战略的落实密切相关。已有研究表明在相同的外部环境下,企业的创新投入还存在较大差异,因此从企业内部出发,探讨企业内部因素对企业创新投入的影响尤为重要。本文通过研究以往文献,从组织内部
土壤风蚀是目前破坏全球生态系统的重要原因之一,严重影响人类的生存和发展。为了更好地满足人类生存发展的需求,稳定可靠的风沙监测手段具有重要的钻研意义。光纤光栅作为一种新型的无源器件,以其尺寸小、抗电磁干扰、耐腐蚀、传输距离远、传输容量大等特点,广泛用于现代化的监测系统中。因此,将其应用于本课题设计的风沙监测系统中,可以为风沙监测领域带来新的生机。当前风沙监测的方法主要有两种,一是传统的人工监测方式,
本学位论文是一篇基于《作为文体的物语·增补版》的翻译而完成的笔译实践报告。翻译原文为2012年出版的《作为文体的物语·增补版》第二部分的节选部分。其作者是小森阳一。