【摘 要】
:
近年来,人工智能特别是深度学习技术在模式识别、场景感知和任务决策等方面取得了突出的效果和成绩。与此同时,边缘计算和设备如嵌入式终端等的发展也带来了更高的数据处理和计算需求。深度神经网络出色的数据特征提取和分析能力在边缘计算场景有着广泛的应用前景。然而,深度神经网络的复杂度严重限制了其在资源有限的边缘计算场景下的部署和应用。因此,如何有效地降低深度神经网络的复杂度是本研究的重点问题。首先,本研究从深
论文部分内容阅读
近年来,人工智能特别是深度学习技术在模式识别、场景感知和任务决策等方面取得了突出的效果和成绩。与此同时,边缘计算和设备如嵌入式终端等的发展也带来了更高的数据处理和计算需求。深度神经网络出色的数据特征提取和分析能力在边缘计算场景有着广泛的应用前景。然而,深度神经网络的复杂度严重限制了其在资源有限的边缘计算场景下的部署和应用。因此,如何有效地降低深度神经网络的复杂度是本研究的重点问题。首先,本研究从深度学习压缩算法,特别是剪枝理论出发,总结和归纳了主流深度学习剪枝方法。在此基础上,本研究提出了动态特征图传播算法,在训练阶段动态地调整每次神经网络前向传播的子结构,旨在降低深度卷积神经网络的复杂度,优化传统深度学习剪枝算法流程,实现端到端的神经网络训练和压缩。进一步地,本研究提出深度结构性学习的策略,考虑在神经网络参数训练之前,通过有效地评估神经网络不同层的重要性,在重要性高的层分配更多神经元,优先学习深度神经网络的紧致化结构性特征,有利于降低深度学习在训练阶段的复杂度,并提高神经网络参数的收敛速度。同时,本研究将深度结构学习流程嵌入到常见的“云边协同”的边缘神经网络部署框架当中,简化了传统模型压缩和部署的流程复杂度,充分满足边缘应用的隐私性和个性化需求。最后,本研究在主流深度神经网络架构和标准数据集上进行了仿真验证,实验结果充分说明了所述算法的有效性。
其他文献
集成电路工艺制程十分复杂,在整个制造过程中会出现很多系统性工艺故障,及时地定位和解决这些故障能够保证集成电路的良品率和产品质量。不同的系统性工艺故障会在晶圆图上形成不同的故障图案,因此,可以通过对晶圆图故障图案(Wafer Map Defect Pattern,WMDP)进行分类来定位工艺故障。这也一直是学术界和工业界关注的一个热点,这种方式也被称为晶圆图故障图案识别(Wafer Map defe
近年来,深度卷积神经网络(Convolutional Neural Network,CNN)在计算机视觉任务方面取得了显著的成功。然而,CNN通常会产生大量的计算和存储消耗,从而阻碍其在移动和嵌入式设备上的部署。为了解决这一问题,许多研究工作都集中在压缩CNN的规模上。模型压缩作为一种可以通过降低深度神经网络冗余度来减少网络模型的存储大小、加快其运行速度的新兴研究领域,被广泛应用于诸如物体识别、分
表型数据是虾育苗优选过程中重要的观测指标,目前主要采用人工方法测定,测量过程不仅效率低,而且采集的表型数据有限。如何高效地获取虾的表型数据一直困扰着育种界。另外,虾类育种优选过程中需要分清楚每只虾的家系,目前只能采用人工方式来进行家系的分类,这严重限制了虾类的育种优选过程。近年来,深度学习算法以优异的性能和应对复杂场景的鲁棒性,在各个工业领域都发挥了巨大作用。因此,本论文以南美白对虾为研究对象,致
本文以民法典第五百三十六条为中心,以债权人的债权是否到期、代位权是否经人民法院认定为标准,将破产程序中债权人代位权行使划分为4种类型。无论是哪种类型,债权人均可以自己的名义申报破产债权;破产程序中债权人代位行使之债权的性质、数额和范围,与通常情况下债权人代位权行使的范围并无本质差别;在代位申报债权确认方式的问题上,因代位权诉讼是一种独立的诉讼类型,破产程序关于债权的确认程序无法吸收合并代位权诉讼程
随着移动设备应用程序的日益复杂和处理器功耗密度的不断增加,功耗和热问题已经成为了智能移动端的处理器设计中的主要问题。动态调频调压技术(Dynamic Voltage and Frequency scaling,以下简称DVFS)是现代处理器中最常用最有效的系统级电源管理方法之一。但目前智能移动设备操作系统中的DVFS策略考虑的因素较为单一,大部分只考虑处理器当前的负载,这很难实现高效全面的电源管理
随着5G技术的逐步普及以及6G技术的深入研究,越来越多的高速移动场景开始对移动网络提出了更高的要求,即通信链路既需要满足低误码的高通信质量,又需要满足高速率的高通信效率。对此,自适应链路相关的技术逐渐成为研究者们日益关注的研究热点。然而,高速移动场景下的信道与低速信道有着很大的不同,信道各项参数在短时间内快速变化,传统的信道估计难以以低代价实现对快变信道的准确跟踪。而自适应链路技术的重要基础之一就
人脸关键点检测是计算机视觉领域一个很重要的课题,诸多人脸分析任务都依赖于精确的人脸关键点定位,比如表情识别、头部姿态估计、人脸合成等。随着近年来深度学习的发展,人脸关键点检测已经取得了极大的进展,但是在无约束环境下,由于姿态、遮挡等挑战的存在,人脸关键点检测依旧是个难题。目前基于深度学习的人脸关键点检测算法可以进一步细分为两类:一类基于坐标回归,由神经网络实现从图像到数值坐标的直接映射;一类是基于