基于随机森林算法解决不平衡分类问题的方法研究

来源 :东北大学 | 被引量 : 0次 | 上传用户:aolade
下载到本地 , 更方便阅读
声明 : 本文档内容版权归属内容提供方 , 如果您对本文有版权争议 , 可与客服联系进行内容授权或下架
论文部分内容阅读
不平衡数据是指数据集中属于某一类别的样本量远超过其它类别的样本量,即所属不同类别的样本量间存在较大差异。研究人员常把在数量上处于劣势的样本称作正类样本,而把数量较多的样本称作负类样本。由于正负类样本量相差悬殊,特别是正类样本量过少,会导致样本携带的信息不能充分被表达,此时若使用传统的分类算法对其进行分类,其结果往往并不理想。因为分类器更倾向于将正类样本误分到负类样本中,从而使得分类器对正类样本的识别能力较差。本文针对不平衡分类问题进行深入研究,进而找到解决该类问题的突破点,并使用随机森林算法作为分类器模型。SMOTE(Synthetic Minority Over-sampling Technique)算法是经典的从数据层面解决不平衡分类问题的方法,但是该算法在合成样本时容易存在样本盲目性和边缘化等问题,正是由于这些问题的存在,常使得一些分类算法在该类问题上的表现较差。首先,本文针对SMOTE算法的不足,提出了一种新的数据平衡化方法,即CT_SMOTE算法(Centralsample-Twice interpolation SMOTE)。然后,综合考虑整个不平衡数据集并结合过采样和欠采样的优点,提出了 CT_SMOTE+TL2混合算法,该混合算法不仅能有效解决SMOTE算法合成样本时的盲目性问题,而且能更好地缓解样本边缘化问题,进一步改善了数据集的不平衡性。最后,基于改进算法建立了随机森林分类模型,该分类模型提供了一个解决不平衡分类问题的框架。实验结果表明,本文提出的CT_SMOTE算法和CT_SMOTE+TL2混合算法在处理不平衡数据方面具有一定的优势,从而可以提高随机森林算法的分类性能,使得分类器更加关注对正类样本的识别,进而达到预期的分类效果。本文的内容在学术研究与实际应用价值等方面均具有重要意义,并且提出的改进算法具有良好的稳定性,能够应用到更多具有不平衡问题的领域中,比如医疗诊断、异常检测等领域。
其他文献
我国是一个地震多发的国家,在地震作用下桥梁结构时常遭受到破坏。壁式墩梁桥是我国市政桥梁中比较常见的一种桥梁形式,目前国内外对其研究尚存在一些不足。本文以壁式墩梁桥为研究对象,对其震害机理和地震易损性进行研究,主要工作内容如下:(1)对壁式墩梁桥震害机理进行研究,考虑到壁式墩梁桥与普通梁桥在墩柱结构形式上存在巨大的差异,本文着重对壁式墩梁桥的壁式墩震害机理进行研究。由于目前对壁式墩的实验研究较少,而
河南省大学生“华光”体育活动篮球联赛是由河南省教育厅主办,河南省学生体育总会篮球协会协办的河南省高校大学生篮球赛事。其承办单位主要由各高校之间竞选产生,主要考查各
近十年来,2μm光纤激光器因其在医疗、材料加工、激光通信和大气监测等领域所具有的独特优势而成为了科学研究的热点。多波长运行态和锁模运行态是2μm光纤激光器中应用广泛
俄罗斯境内国际过境运输的发展是“一带一路”倡议中俄中合作的领域之一。西伯利亚大铁路在国际过境的发展中起着主要作用,这是连接亚太地区和欧盟国家的铁路“桥梁”。西伯
氧化锌纳米线材料因其直接带隙和大的比表面积等特点,具有独特的光学性质和电学性质。近年来,氧化锌纳米线在众多领域中的应用被广泛研究,包括光电探测、气体传感、生物传感
随着人工智能的发展,各行各业都产生了各种各样的数据。这些数据呈现出海量、多元化、高维等特点。然而,在这些大数据中,很大一部分属性的作用是微乎其微的,它们增大了计算机
活塞是船用柴油机的“心脏”,它决定了柴油机的动力性、可靠性及经济性等,是柴油机最关键的部件之一。活塞通过高速往复运动传递柴油机的原动力,其加工精度的不达标通常会引起销孔开裂、侧部磨损以及外圆损伤等破坏性失效,影响柴油机的使用寿命。铸铁活塞是一种常用的船用柴油机活塞,由于其结构复杂、壁厚较薄且径向刚性较差等特点,而在生产过程中容易发生加工变形,难以保证加工质量。因此,研究船用柴油机铸铁活塞的加工工艺
写作在英语四项基本技能中处于很重要的地位,但又使许多外语学习者心生怯意。几十年来,许多研究者和教育者聚焦如何提升语言学习者的写作准确性。一些研究者(Ferris,2004;Fer
随着工业时代的逐步推进,机械设备的结构、系统、控制等之间的联系日趋紧密和复杂,无论是哪一部分发生了失效或出现了故障,都会牵一发而动全身,轻则机械设备性能无法实现预期功能、控制系统发生失效,重则产生灾难性的后果。机械设备故障的产生,除了会造成巨大的经济和财产损失外,严重的还会造成重大的人员伤亡、环境污染和恶劣的社会影响。因此,对机械设备的故障特征的研究,则是保证生产生活顺利进行的重要课题。故障诊断问
邰爽秋是我国近现代教育史上著名的教育家,民生本位教育思想的创始人和民生本位教育实验的践行者。邰爽秋因其卓越的理论贡献和躬身力行的实验创新精神,与陶行知、梁漱溟、晏