【摘 要】
:
近年来,作为人工智能研究最重要的方向之一,卷积神经网络模型发展迅速,但其体积和运算量同样随着性能的提高而迅速增大,对计算设备提出了很高的要求。针对这一问题提出的二值化方法对卷积神经网络具有较大的压缩加速潜力,但因其并未彻底移除浮点数乘法运算,仍难以在算力有限的边缘计算设备上运行。基于此,本文在原二值化方法的基础上作出改进,消除了二值卷积神经网络模型中剩余的乘法运算,使其更加适合在边缘硬件上部署,并
论文部分内容阅读
近年来,作为人工智能研究最重要的方向之一,卷积神经网络模型发展迅速,但其体积和运算量同样随着性能的提高而迅速增大,对计算设备提出了很高的要求。针对这一问题提出的二值化方法对卷积神经网络具有较大的压缩加速潜力,但因其并未彻底移除浮点数乘法运算,仍难以在算力有限的边缘计算设备上运行。基于此,本文在原二值化方法的基础上作出改进,消除了二值卷积神经网络模型中剩余的乘法运算,使其更加适合在边缘硬件上部署,并基于改进的算法设计了硬件计算结构。首先,针对二值化方法,本文作出三点改进:对二值化方法中缩放因子的作用原理进行推导,证明缩放因子在二值模型中并不能增加层间信息传播,并基于该证明将缩放因子与批归一化层进行了融合;分析了批归一化层中存在的冗余,将批归一化根据理论证明简化为偏置加法;进一步将改进的批归一化层与二值化层融合为一次数值比较。经改进后的二值卷积神经网络模型无需乘法运算即可实现原有模型的功能,大大降低对硬件计算资源的要求。其次,针对二值模型的硬件设计:根据二值模型的特点将传统卷积神经网络加速器中按空间维度并行的设计改为按通道维度并行;经资源消耗分析,对于卷积中的求和部分采用8位查找表结构POPCOUNT配合加法器树实现,达到延迟与资源的均衡;在池化模块的设计中,使用循环比较结构配合卷积窗口的蛇形移动方式进行最大值比较;融合后的二值化模块使用比较器与偏置值比较得到输出结果。该硬件架构设计能灵活适应不同尺寸的卷积核,使硬件资源能得到充分复用。最后,基于Vivado平台对二值卷积神经网络的核心运算模块进行了FPGA设计代码编写以及仿真调试。结果表明,当并行度为64时,该设计方案实现了260 MHz下32 GOPS的平均性能,且仅占用极少的片上资源。基于本文改进二值化方法的卷积神经网络及其硬件设计对计算资源与模型结构具有双重适应性,可在资源极有限的边缘硬件上根据系统资源和性能需求实现灵活的部署,具有良好的扩展性,有一定的理论和应用价值。
其他文献
目的:智慧医院中央空调系统节能平台借助智能物联网技术,将大数据、人工智能、远程运维等技术应用到中央空调系统节能设计实际中。方法:通过智慧节能策略的执行和控制,不断升级和优化医院能耗系统的结构。结果:构建智慧医院中央空调系统节能数据采集、自动控制、数据分析、策略优化和能源预测等功能,有效提升能源利用效率和智能化水平。结论:采用系统节能控制方案,多维度监测智慧医院能耗水平,建立完善的能源控制、管理、运
能量均分定理指出:在温度T下,多粒子系统每个自由度的平均能量是kBT/2,其中kB是Boltzmann常数。热力学第三定律指出:系统的任何热容量在温度趋近于绝对零度时趋于零。对于同时遵循高温能量均分定理和低温第三定律的热力学系统,比热与温度之间关系的曲线具有两个普适行为:当温度为零开尔文时,它终止于零;并且随着温度的升高,其收敛到恒定的比热值。由于当比热几乎达到均分值时总是可以找到特征温度Tc来标
锚板基础作为一种提供抗拔承载力的重要基础形式,因其具有形式灵活、施工效率高且成本低、对既有环境影响小等特点,在大型悬索桥、大型信号塔和输电塔、边坡挡土墙以及浮式海洋结构工程中得到了广泛应用。然而,由于山岭地区地形复杂、海洋地底地形起伏不平,锚板也常应用于临近边坡结构物,如山区信号塔和海上石油开采平台等等。在此情况下,锚板抗拔承载性能的大小取决于土体的破裂机制,现有理论大多基于人为假定的破裂面,与实
近年来,随着计算机技术的快速发展和推荐系统的日渐成熟,人们在网络中经常会被系统自动推荐消息。由于多数推荐都是基于协同过滤推荐,并没有更全面、更多样化、更深入的考虑到用户的喜好,如何对人们各自的喜爱进行更加准确、高效的推荐已成为研究人员需要解决的问题。本文使用融合生成对抗网络(Generative Adversarial Networks,GANs)和注意力机制(Attention Mechanis
声波是一种振动的机械波,声波的控制在现代生产生活以及其他方面扮演越来越重要的作用。除了日常生产生活中的传统振动噪声控制以外,环境监测、国防军工、生化分析、疾病检验和健康监控等新兴领域对声波的控制提出了更新的要求。在声波调控领域,布里渊区的角点或中心固定有狄拉克点的声子晶体的强边缘态得到了非常广泛的关注。声子晶体的拓扑保护边缘态现象的发现,使得二维声学晶体系统的拓扑边缘态研究成为拓扑材料领域的研究热
工业生产的机械化和智能化引领了制造产业的变革,工业机器人产业具有十分巨大的发展潜力。其中机器人的振动性能直接影响了其可靠性、工作精度和市场。本文针对某国产机器人手臂末端存在明显抖动现象,对机器人的振动问题进行系统研究。首先基于试验方法对机器人的振动性能进行评价,提出改进传递路径分析(Transfer Path Analysis,TPA)的方法来研究的机器人抖动问题,基于经验模态分解(Empiric
目前,城市公园水域、乡镇池塘、湖泊、养殖等小型水域中的漂浮垃圾污染日趋严重,对周边环境及水资源构成较大影响。国内外面向大型水域的水面垃圾收集方式的研究和相关机械产品已较多,但是针对小型水域的水面垃圾收集装置的研究和开发尚相对较少,为此研究出自适应能力强、便于携带、结构简单、装拆调整方便、工作效率高、控制灵活的水面垃圾收集机械有着非常现实的意义。本课题主要研发小型水域水面垃圾收集船,其主要作用是完成
由于泡沫混凝土具有经济、环保、节能等显著优势,近年来受到广泛关注。但泡沫混凝土特有的多孔结构,导致其强度低、吸水率大、收缩大、抗渗性差,限制了其在土木工程中的推广应用。水性环氧树脂乳液经固化后,具有强度较高、收缩较低等技术特性。本文研究环氧树脂乳液对泡沫混凝土性能的改性效果,主要研究了环氧树脂乳液掺量对泡沫混凝土力学性能、干燥收缩和抗渗性能的影响。主要研究内容和结果如下:(1)以硅酸盐膨胀水泥、混