面向降维的图学习研究及应用

被引量 : 5次 | 上传用户:s04325102
下载到本地 , 更方便阅读
声明 : 本文档内容版权归属内容提供方 , 如果您对本文有版权争议 , 可与客服联系进行内容授权或下架
论文部分内容阅读
机器学习是人工智能的核心研究领域之一。机器学习中大量算法与图密切相关,如谱聚类,半监督学习与降维技术等,其中图通常用于刻画数据间的相似性关系。在该类算法中,图构建的好坏对算法的性能有着重要影响。因而如何构建一个高质量的图成为近年来机器学习领域的一个研究热点。本文提出了一种新的构图思想,并针对降维技术对其进行了系统研究,主要工作如下:(1)同时降维与图学习的思想。传统的图构建方法往往独立于学习任务,即先构图,再将其应用于后续的学习任务(如降维)。这样一旦构建了一个“坏”的图,且在学习任务中固定不变,势必会严重影响算法的性能。本文针对降维问题,提出了同时降维与图学习的思想,尝试将图作为优化变量在降维过程中完成学习。然后,提出了四种降维算法(2)-(5)对该思想进行了具体实现。(2)熵正则化的同时降维与图学习。基于局部保持投影LPP,通过对图施加熵正则化约束提出了图优化的局部保持投影GoLPP算法,导出了一个带有热核权的图更新公式。GoLPP有效减轻了原始LPP算法对k近邻(建图)准则的严重依赖性,并且实验验证了如此优化的图往往有利于后续分类性能的提高。(3)半监督的同时降维与图学习。由于GoLPP中强的约束导致其无法(像传统半监督算法那样)自然地嵌入监督信息,因而,我们首先通过松弛约束改进了GoLPP,然后在图的优化过程中嵌入逐对约束的监督信息,得到了具有概率含义的半监督边权更新公式。与其它半监督算法相比,实验验证了其有效性。(4)预定义图约束的同时降维与图学习。GoLPP的图更新公式仅依赖于投影空间的信息,然而我们通过实验证明投影空间的信息未必总是可靠。为避免图在优化时跟随投影方向自由变动,本文试图在图的优化过程中对图施加一定的约束,将其限制在预定义图S0附近。这样得到的图更新公式是原始空间中预指定图S0与投影空间中新建图(带有负欧氏距离权)的加权和,既结合了原始数据信息,又利用了不同投影数据的信息。实验验证了该模型具有更强的适应性。(5)稀疏约束的同时降维与图学习。GoLPP中对图施加了最大熵原则,导致其丧失了传统图(如k近邻图)中的稀疏性。本文将稀疏表示建图与寻求投影方向(保持这样的图)同时进行,提出了稀疏约束的同时降维与图学习算法,为稀疏保持投影SPP与GoLPP之间提供了一种自然联系。在某些数据集上实验验证了所提算法较GoLPP及SPP具有更好的性能。(6)同时降维与图学习的正则化框架。将上述算法统一起来,根据不同先验,动机或假设施加不同的正则化项,从而得到不同的与问题密切结合的图或图更新公式。同时,为设计新的图学习算法提供了一个可供选择的平台。
其他文献
笔者综合分析了国内外城市森林的概念、功能与效益、评价、结构、规划与管理等方面的研究现状,展望了城市森林的研究趋势。
<正>高血压肾损害是高血压病严重并发症之一,是终末期肾脏病的第二病因,28%的ESRD与高血压有关[1],如何防治高血压肾损害,尤其早期肾损害对预防慢性肾脏病的发生和延缓慢性肾
阅读教学对于汉语学习者是一门很必要而且重要的课程,但是传统的课堂阅读教学有阅读材料涉及领域有限、阅读量有限、相关扩展有限、教师无法监控课外阅读等缺陷。而网络教学的
当前,我国社会正处于剧烈的社会转型期,引发深刻的社会变革。作为社会的细胞—社区,在社会转型背景下,必然也发生相应的变化。随着我国城市化进程的不断加快,社区建设和管理问题开
生态文学的出现是人类反思的一大结果,生态批评是对生态文学的研究,又为人类应对生态生存问题提供智慧。《淮南子》虽算不上一部完整意义的生态作品,但其中含有闪烁着生态思想光
介绍了塑料大棚茄子-芹菜-菠菜一年三茬高效栽培模式,并分别介绍了该模式下茄子、芹菜、菠菜的关键栽培技术,以期对广大菜农的生产起到指导作用。采用该模式667m。每年可获得纯
目的:观察六味地黄丸和金匮肾气丸对实验性自身免疫性脑脊髓炎(experimental autoimmune encephalomyelitis,EAE)小鼠脑组织中肿瘤坏死因子-α(tumor necrosis factor,TNF-α
随着城市园林事业的发展,人们对园林绿化的要求越来越高,逐渐提出了园林彩化的要求。这也成为未来宁波园林发展的一个奋斗目标。文中通过对关于色彩的理论及色彩对人们心理影
本文认为,我国中小企业存在着不重视企业文化建设、家族管理色彩浓厚,以及企业文化缺乏特点等问题,这些问题已经严重影响到了中小企业的企业文化建设,制约了企业的进一步发展
采用扫描电子迁移粒径谱仪,对木材明火、棉绳阴燃、聚氨酯明火、正庚烷明火和工业酒精明火中产生的烟雾气溶胶进行在线测量,记录并分析随时间变化的烟颗粒浓度变化和粒径谱分