【摘 要】
:
近年来众多的研究工作已经表明神经网络(Neural Network,NN)相较于传统算法有着显著的优势,其已经被广泛应用于图像、语音和视频识别等领域。但是由于神经网络对硬件平台的算力和存储需求巨大,导致实际应用存在困难。现有的CPU平台无法提供足够的算力支持,而GPU平台由于有着很高的计算力和易用的开发框架成为神经网络的首选平台。同时,基于FPGA的神经网络加速器也是目前研究的热点,经过特定的硬件
论文部分内容阅读
近年来众多的研究工作已经表明神经网络(Neural Network,NN)相较于传统算法有着显著的优势,其已经被广泛应用于图像、语音和视频识别等领域。但是由于神经网络对硬件平台的算力和存储需求巨大,导致实际应用存在困难。现有的CPU平台无法提供足够的算力支持,而GPU平台由于有着很高的计算力和易用的开发框架成为神经网络的首选平台。同时,基于FPGA的神经网络加速器也是目前研究的热点,经过特定的硬件设计,FPGA往往可以拥有超过GPU的处理速度,同时兼顾能效比。本文在此背景下,以自动驾驶领域对车辆、行人的实时检测需求为切入点,探索和研究了神经网络目标检测算法在FPGA上的并行加速方法。本文首先研究了神经网络目标检测算法和基于FPGA的神经网络加速器。然后以SSD(Single Shot MultiBox Detector)目标检测算法和ResNet(Deep Residual Network)网络为基础,设计了ResNet18-SSD模型,该模型既保持了VGG-SSD模型准确度,也有效降低了计算和储存复杂度。针对该模型的推理(Inference)过程,本文设计了基于两片Xilinx VU9P FPGA的平铺式加速方案。在保证预测精度的情况下,利用Ristretto对整个模型进行了定点量化,以避免FPGA直接采用浮点运算。同时,对不同类型的卷积层本文分别设计了不同的硬件结构,针对3′3,stride=1卷积层采用Winograd算法实现,而3′3,stride=2卷积层则采用原始卷积算法实现,并在实现过程中针对Xilinx DSP进行了特殊优化。另外,本文也设计了相应的数据缓存和复用结构,使得整个计算流程形成流水线,且不依赖于片外DDR。在卷积层之外,本文也设计了pooling、sum等其它类型层的硬件结构。最后,本文使用VCU118评估板搭建了基于FPGA的神经网络加速平台,对设计的方案进行了具体实现。为了达到良好的演示效果,本文还进一步设计了相应的上位机处理程序,并在FPGA内部实现了PCIe、QSFP接口逻辑。最终,量化后的ResNet18-SSD模型在KITTI数据集上的预测精度为0.797,比量化前下降3.1%。在输入图像尺寸为512×768×3下,FPGA处理延迟为84.23ms,帧率为11.87FPS(Frames Per Second),整个系统吞吐率达到了803GOPS。
其他文献
<正>一、金融账户的实名制要求与证券业账户开立方式相关法律法规规定金融机构为客户开立的各类账户,应当遵守实名制要求。例如,《个人存款账户实名制规定》第六条规定,个人
随着我国经济基础的不断壮大,文化创意产业逐渐成为了中国产业新的发展方向。汉代文字瓦当是我国文化文物重要的一部分,其中的丰富文化资源的再挖掘和再利用,不仅能为现代设计带来源源不断的灵感,还能产生经济价值,更能拉近公众与传统汉代文化之间的距离,传承和发展传统文化。然而目前对文化文物的传承与保护大多仍停留在文物展示与宣传方面,面向消费者需求的文化创意产品却比较少,传承方式还存在很大的局限性。本文是基于汉
财务报告是外界了解企业财务状况与经营成果的重要媒介,企业所有者依据高质量的财务报告可以了解企业经营状况,充分了解企业内部有效信息,尽量避免委托代理过程中由于信息不对称带来的问题。因此,财务报告的质量就变得尤为重要。在21世纪的今天,上市公司有关于财务报告质量方面的问题不断暴露,国内外重大财务丑闻的披露,引起外界的巨大恐慌,外部信息使用者对更加全面、准确、高质量的财务报告的需求就更加急切,解决财务报
中华人民共和国成立七十周年以来在政治、经济、文化等各个方面都发生了新变化,十三亿中国人在为实现中华民族伟大复兴中国梦的同时也在为中国的崛起之路努力奋斗迈向新征程。在国家快速发展的同时,人们对衣食住行提出了更高的要求,尤其是在住的方面,对室内空间设计也提出了更高的要求,不仅追求自然舒适、简约时尚还更加注重个人风格化和艺术创新性。民宿的设计风格正是如此,既能带人们领略自然景观和人文风景的同时也能带来一
运用协整理论与误差修正模型,分析了1998年-2012年泰州物流与经济发展的作用。研究结果发现,泰州物流发展与经济增长之间表现为长期的均衡关系,泰州物流对经济的推动作用不如经济
随着经济社会的深入推进,我国资本市场的发展也取得了长足进步,但与发达资本主义国家相比仍然具有诸多缺陷。会计信息披露合法性、准确性、完整性和及时性的发展成熟度与西方发达资本主义国家相比仍然具有较大的差距。这对于我国资本市场的发展而言具有较大影响,值得社会各界引起高度重视。在会计信息披露制度建设方面,我国起步相对较晚,发展仍不成熟,依然处于需要不断完善的阶段。虽然国家已经制定了相应的法规对会计信息披露
生命是享受一切权利的基础,生命的价值高于一切。青少年处于人生观、价值观形成的关键时期,生命教育对学生的成长起着非常重要的作用。七年级道德与法治教材中蕴含着丰富的生命教育内容,是进行生命教育的关键课程。基于此,笔者在实地调查和教学实践的基础上,运用文献分析法、问卷调查法、访谈法,对七年级学生生命教育现状进行深入的研究和分析,针对生命教育在教学中存在的问题提出了具体的教学对策。第一方面是生命教育相关内
随着改革开放四十年来的快速发展,在取得了举世瞩目成就的同时也留下了大量的历史问题,近年来中国各大城市相继出现了"城市病"。本文以沈北新区为研究对象通过运用流体力学软
分析了INTPA100以及PST645系列继电器变压器非电量保护误动的原因,据此介绍了防止变压器非电量保护误动的措施,取得了可喜的运行效果。