基于共轭梯度和流形正则化的核极限学习机及其应用研究

来源 :湘潭大学 | 被引量 : 0次 | 上传用户:bhf10116
下载到本地 , 更方便阅读
声明 : 本文档内容版权归属内容提供方 , 如果您对本文有版权争议 , 可与客服联系进行内容授权或下架
论文部分内容阅读
极限学习机(Extreme learning machine,ELM)本质上是一种前馈神经网络的改进模型,由于该算法具有参数设置简单并且学习速度快的优点,因此其应用范围广泛、相关算法研究不断增多。极限学习机通过系统随机给定输入层权值的方法来获得隐含层随机映射,隐含层权值是采用最小二乘法通过一次计算而获得,这一特点使得其学习速度非常快。本文对极限学习机算法展开研究,针对极限学习机的一些缺陷进行改进,提出两种新的极限学习机模型,并将其应用于图像复原和糖尿病检测,改善了极限学习机的性能,拓宽了极限学习机的应用。本文的主要研究工作如下:(1)为了改善极限学习机网络的稳定性、提高其泛化性能,正则极限学习机通过引入正则化理论并结合统计学风险知识,最终使得经验风险与结构风险的比例得到调和。本文将正则极限学习机用于恢复受高斯模糊影响的图像,与BP网络和均值滤波复原算法相对比,其在训练速度、复原效果上均有很好的表现。(2)核极限学习机是在引入了核函数理论基础上,采用核映射作为隐含层输出,其稳定性更好,显示出比随机映射的优越性。但是当样本过大时,核极限学习机通过求解逆矩阵来获得输出权值的方法在时间、空间复杂度上表现不佳。因此本文提出了一种基于共轭梯度的核极限学习机,通过引入共轭梯度算法来求解核极限学习机中的逆矩阵,能够在学习速度上具备优势,并且实验显示占用的内存降低,在计算机上具备更好的可行性。将改进后的核极限学习机用于高斯模糊图像的复原,并与BP网络和均值滤波作对比试验,结果显示所提出的改进核极限学习机在时间、效果等方面具有优势。(3)本文提出一种流形正则化核极限学习机模型。引入了流形正则化理论,通过构建拉普拉斯矩阵的方法用于改进核极限学习机的学习算法。仿真实验验证了流形正则核极限学习机良好的泛化性能,虽然增加了时间消耗,但是在效果上依然表现良好,不失为一种新方法。
其他文献
【摘要】阅读是作文的基础,阅读课本的教学就应起到指导作文的作用,这是对的,但是,从阅读到作文毕竟有一个复杂的过程,阅读教学能为作文奠定基础,却无法代替系统的作文训练,阅读教学只能为作文奠定基础,却无法代替作文训练。  【关键词】示范 指导 分组修改 相互借鉴  【中图分类号】G623.24 【文献标识码】A 【文章编号】2095-3089(2015)16-0134-02  作文是同学们写的,编辑们
随着城市化进程步伐的加快以及下垫面不透水地块的增加,雨水地表径流污染目前已成为最为严重的一种非点源污染。为从源头控制降雨径流污染,通过分散式源头控制的低影响开发(LID)成为一种极为有效的方法,但LID措施的选取受径流水质特性的影响较大,因此有必要对研究区域降雨径流水质特征进行深入研究,同时了解流域降雨面源污染状况,分析径流污染的影响因素,以期为今后海绵城市建设提供参考依据。本研究以重庆市万州区新
主要研究了粗糙集理论在决策表离散化中的应用,提出了一种新的基于粗糙集理论的决策表离散化算法.该算法是一种基于决策表属性重要性的算法,首先使用条件属性与决策属性的互
当航行体在水中高速航行时,航行体表面压力会下降到此时的饱和压力,水会汽化形成空泡。超空泡的形成可以大幅地提高水下航行体的速度,但空泡的产生和溃灭引起的力学效应对航
研究了交流电作用下形成的铝多孔氧化膜,在封孔处理过程中膜的结构、电性能及含量的变化,探讨了交流氧化膜常温封闭机理.结果表明,常温封孔主要是利用溶液中氟离子等吸附在氧
目的:脂溢性角化病是一种临床常见的皮肤良性肿瘤,在我国随着社会经济的发展,人口老龄化及人们对外貌注重,因脂溢性角化病就诊的患者逐年增多。大部分典型病例诊断较容易,但
随着我国经济的快速、稳定的发展,人们的生活水平日益提高,汽车的保有量呈现快速增长。汽车为人们的生活带来方便的同时,也带来了不少负面影响。道路交通的安全问题一直是人