【摘 要】
:
人工智能时代的到来,催生了学者们对深度学习技术研究的热潮。深度学习通过对已有知识进行推理分析和学习总结,在目标检测、自然语言处理、机器翻译以及推荐系统等领域取得了巨大的成功,解决了很多领域内的疑难问题。虽然深度学习发展至今已经取得了瞩目的成绩,但是传统的深度学习模型仍然存在一些问题。一是传统的深度学习模型是基于向量空间的,无法直接对信息-物理-社会系统(CPSSs)中的混合异构数据建模,而是将这些
【基金项目】
:
国家重点研发计划项目(2017YFB0801804、2018YFB1800103、2019YFB170062); 国家自然科学基金项目(61932010); 华中科技大学自主创新研究基金资助项目(2018KFYXKJC046);
论文部分内容阅读
人工智能时代的到来,催生了学者们对深度学习技术研究的热潮。深度学习通过对已有知识进行推理分析和学习总结,在目标检测、自然语言处理、机器翻译以及推荐系统等领域取得了巨大的成功,解决了很多领域内的疑难问题。虽然深度学习发展至今已经取得了瞩目的成绩,但是传统的深度学习模型仍然存在一些问题。一是传统的深度学习模型是基于向量空间的,无法直接对信息-物理-社会系统(CPSSs)中的混合异构数据建模,而是将这些异构数据转化成向量再建模。虽然这种向量化的方式也可以奏效,但是却没有将数据之间的潜在关联关系考虑在内,降低了数据的利用率。二是传统的深度学习模型在训练过程中存在隐私泄露的问题,这对于一些敏感数据而言,一旦泄露之后将会对个人甚至国家带来无可估量的威胁或财产损失,甚至涉及到生命安全问题。因此,针对上述两个问题开展的主要研究内容如下:针对传统的深度学习模型无法直接对CPSSs系统中的多源异构数据进行建模的问题,利用张量对异构数据的表征能力,与传统的深度学习模型有机结合,提出了两种深度计算模型。一是在传统的循环神经网络模型的基础上,将张量与之结合,提出了循环深度计算模型。二是在张量自编码器和深度卷积计算模型的基础上,将二者结合并加入了张量特征融合层,提出了混合深度计算模型。同时,对这两种模型分别设计了沿时间的高阶反向传播算法和混合的高阶反向传播算法,用来对模型的训练。针对深度计算模型在训练过程中存在的隐私泄露问题,在提出的循环深度计算模型的基础上,将差分隐私保护技术相结合,进一步提出了差分隐私的循环深度计算模型。对此,设计了基于差分隐私的沿时间高阶反向传播算法,并证明了所提出的方法满足差分隐私的性质,同时也分析了算法的可用性。针对所提出的三个模型,分别在多个数据集上进行了实验验证,实验结果表明所提出的模型和算法是有效的。
其他文献
激光干涉仪空间探测器LISA(Laser Interferometer Space Antenna)是一个空间引力波探测任务,它将通过引力波来了解与研究宇宙,为开创引力波天文学建立基础。LISA计划要求每个航天器的检验质量TM(Test Mass)在引力波敏感自由度上的非引力加速度噪声在0.1m Hz到0.1Hz范围内低于3.0×10-15m/s2/Hz1/2。为了验证LISA中一些极具挑战的关键
随着工业机器人的广泛应用,对机器人运动控制中的关键环节--轨迹规划的性能提出了更高的要求。优良的机器人轨迹过渡技术可以改善轨迹运动的平滑性,提高运行效率和精度,对提高机器人的综合性能具有非常重要的作用。本文对工业机器人轨迹过渡技术进行了深入研究,主要研究内容有:针对工业机器人多运动段轨迹不满足G1连续性的问题,分析了由直线和圆弧插补组成的多运动段的平滑性,设计了不同运动类型过渡段构造方法以及多运动
随着科学技术的发展,工程领域中涉及到的一些函数优化问题越来越复杂,它们往往具有不可导、不连续、多峰值等特点,传统的数学方法已经很难得到理想的结果。函数最优化问题可以通过演化算法进行求解。其中,差分演化算法已经被证明是最强大的演化算法之一。然而,差分演化算法中一些参数的设置对性能有非常大的影响。为了解决这个缺陷,研究者们已经提出了很多不同的参数适应技术。不同的参数适应技术有着不同的特点,各自适用于不
文本作为信息交流的载体,是人类文明的重要标志,在自然场景的图像中广泛的存在,如车牌信息、道路指示牌等。文本相较自然场景图像中的其他内容而言,其具有更加准确丰富的信息以及更强的逻辑性。所以如何准确的定位自然图像中文本的位置,是提取、理解与分析信息的关键步骤。在过去的几年中,场景文本检测方法已经取得了很大的进步。但是大的几何差异(如:方向)是场景文本检测中的关键挑战。在本文中,首先进行实验研究了网络在
近年来,基于WiFi的无线室内指纹定位技术由于其低成本以及高通用性等特点已获得国内外研究人员的广泛关注。然而,随着室内环境变化以及WiFi收发端设备固有的缺陷,无线位置指纹将随着时间发生显著变化,导致传统无线指纹定位方法的定位精度急剧下降。为了保证无线指纹定位模型在动态环境以及硬件设备有缺陷条件下的定位精度,研究者们探索并提出了基于众包的模型更新方法,取得了较好的性能。然而,这些工作在模型更新过程
随着互联网的广泛应用,在线教育也在蓬勃发展。在线教育因具有学习资源丰富、优质且实时更新,学习方式灵活、便捷且不受时空限制等特点,已逐步成为现代教育系统领域里不可或缺的一部分。目前,随着人工智能技术的突破,在线教育已经逐渐从传统的平台式资源教育转化至智能教育。个性化是智能教育系统的核心,而想要做到个性化教育,必须了解学生的实时知识水平。知识追踪是根据学习者的历史学习轨迹,对其整个学习的状态进行建模从
随着智能设备的快速发展,图像变成了生活生产中必不可少的部分,将旧照片与低清晰度的图像转为高清图像成为各个领域一大需求,因此超分辨率技术便又活跃起来出现在人们的视野之中。超分辨率重建是将低分辨率图像通过重建生成具有更丰富细节的高分辨率图像。超分辨率重建技术大类别上分成硬件方式重建和软件方式重建两个大类,由于硬件方面有着诸多限制,软件方式重建图像的方法便成为当前研究的热门,并在很多重要领域得到实际应用
分布式声波振动光纤传感设备采用振动光纤作为传感器实时检测安防区域周边环境。振动光纤在周界安防领域的应用是一项在安防领域的重要发展。在周界安防系统中,需要把事件信号进行准确高效的识别,这是周界安防系统中最主要的任务。在长距离监测中,周围环境复杂多变,不但增加了安防系统对信号识别的难度,而且提升了实时高效监测信号的难度。因此,在复杂环境下对振动光纤感应获取的各种事件信号进行研究很有价值和意义。为了解决
金属氧化物半导体气体传感器,具有结构简单、体积小、功耗低、价格便宜等特点,被广泛应用于食品安全,医用检测,空气质量监测等领域。其可基于微电子机械系统(MEMS)技术,通过光刻、溅射、刻蚀、微喷成膜等工艺制造微热板结构器件,实现亚毫米尺度的器件集成,大幅降低器件功耗和成本,这也将是传感器发展的大趋势。目前基于MEMS技术的传感器微制造平台,主要以硅片作为芯片基底,兼容溅射等成膜工艺,但高性能的气敏膜
随着移动互联网的飞速发展,电影的观看越来越方便。由十九世纪末发展至今,电影的种类越来越丰富,电影的数量也越来越多,不仅传统的电影行业每年会推出大量的新电影,国内的腾讯、爱奇艺等以及国外的Netflix、Apple等流媒体平台也会制作大量的自制作品,影视信息的过载现象导致用户的选择越来越困难。将推荐系统应用于存在海量视频的领域,既可以提高用户的观影体验,又能通过用户的反馈数据来促进推荐系统的发展。最