基于分解策略的多类不平衡分类算法研究

来源 :湖南大学 | 被引量 : 0次 | 上传用户:huangkb009
下载到本地 , 更方便阅读
声明 : 本文档内容版权归属内容提供方 , 如果您对本文有版权争议 , 可与客服联系进行内容授权或下架
论文部分内容阅读
许多现实生活中的应用都受到类不平衡问题的困扰,如医疗诊断和金融危机预测。在这些应用中,目标往往是代表性不足的类别。然而,经典的分类模型考虑的是类别平衡的情景,如决策树模型和贝叶斯模型,将这些模型应用于类别不平衡的场景会导致结果出现偏斜。现有的研究主要关注于二类不平衡问题,但与两类情况相比,多类不平衡问题要困难得多,这是由于决策边界涉及到多个类之间的区分。大量针对二类不平衡问题的解决方案并无法直接应用于多类不平衡问题。因此,多类不平衡分类问题是分类任务中最重要的挑战之一,具有重要的研究意义。分解策略是解决多类不平衡问题的经典方案之一,本文围绕应用分解策略处理多类不平衡问题展开研究,主要研究工作如下:
  (1)针对一对一分解中存在的类不平衡和类重叠的问题,提出了一种基于剪辑的谱聚类欠采样一对一分解算法,该方法通过一对一分解将多类别不平衡数据集划分为多个子集,然后在每个二元子集中使用一种剪辑方案清理重叠区域的多数类数据。接下来利用谱聚类对剩余的多数类数据进行聚类,并根据每个聚类的大小选择保留的数据来重新平衡训练子集。基于剪辑的谱聚类欠采样不仅能减弱重叠问题的影响,同时考虑了数据的分布,能够有效避免丢失大量的重要信息。最后,根据聚合策略输出结果。在16个真实的多类不平衡数据集进行全面实验。实验结果表明,与比较方法相比,该方法的宏平均算术值平均提高2.89%,G均值平均提高8.304%。
  (2)针对现有的分解策略会破坏类之间的潜在关系的问题,提出了一种基于聚类的自适应分解算法用于解决多类不平衡问题,该方法主要包括两个部分:基于聚类的自适应分解和基于剪辑的多样化过采样技术。分解部分根据数据的相似性将数据集划分为不同的聚类(即子集),从而保持类别之间的关系。过采样部分独立应用于不同的聚类,以克服不平衡和重叠问题,删除重叠区域中多数类的数据,并根据每个少数类的特征,选择合适的过采样技术。此外,采用一种多样化的集成学习框架,为不同的子集选择最佳的分类算法。最后为每个查询实例选择最有能力的分类器进行分类。在16个真实的多类不平衡数据集上进行实验验证,实验结果表明,与比较的先进方法相比,该方法的宏平均算术值平均提高了3.625%,G均值平均提高了4.7125%。
其他文献
随着信息时代高速发展,信息数据急剧增长,图像作为信息数据传递与共享的有效载体尤为显著。安全监控,医学诊断,卫星定位等领域都需要对图像进行处理与分析。现实生活中由于硬件设备,计算精度,环境等影响因素,使得人们获取到的图像质量不足以满足其需求,如何获取高质量图像就成为了科学家亟待攻克的难题。针对该问题,学者们提出了许多优秀的解决算法。实践证明基于卷积神经网络的图像超分辨率算法远远优于其它解决算法,并成
[摘 要]网络时代,教师利用新媒体积极开展教学活动,基于职教云和QQ群分屏直播课堂简单易学,被应用到各职业学校的教学实践中。职教云加直播课堂,突破了教学的时空限制。文章分析了职教云和QQ群分屏直播课堂的建立过程,并对教学实践进行了思考,为今后直播课堂的发展提供参考。   [关键词]直播课堂;职教云;QQ群分屏直播   [中图分类号]G564 [文献标识码]A [文章编号]1008-76
期刊
OpenStack是一个开源的云计算框架,提供了存储、计算和网络服务,并逐渐成为云计算基础设施及服务的事实标准,同时,其安全性也越来越受到重视。外部渗透、蠕虫和分布式拒绝服务(Distributed Denial of Service,DDoS)等攻击对云平台造成巨大威胁。在传统的基于泛洪的高速率DDoS攻击方面,已有大量研究成果,但近年来出现的低速率DDoS攻击,具有流量小和隐蔽性强的特点,对云
在光纤传感技术中,光纤法布里-珀罗传感器具有体积小,制作简单,抗电磁干扰等优点,并且可以测量温度、应变、加速度等多种物理量。随着越来越多结构精细的法布里-珀罗传感器的诞生,法布里-珀罗解调的研究也越来越深入。根据法布里珀罗干涉光谱的干涉特性,法珀腔长决定了干涉的周期,这个干涉的周期信号会附加一个相位,那么干涉光的总相位就包括了腔长和附加相位两个未知量。一般解调过程都是先求出光谱总相位再来计算腔长,
[摘 要]在信息化时代,社区教育数字化学习平台是各地开展社区教育工作的重要载体,在时间和空间上突破了对学习的许多限制,体现出社区教育的诸多功能。文章以湘潭乐学社区平台为例,对社区教育数字化学习平台建设进行了实践探索。   [关键词]社区教育;数字化学习平台;路径;能效   [中图分类号]G77 [文献标识码]A [文章编号]1008-7656(2021)03-0059-03   引言
期刊
[摘 要]当今互联网的发展日新月异,拓展了人类的生产、生活空间。社区教育的发展需要数字化技术的支撑,跨区域社区教育数字化学习平台的建设是实现“人人可学、处处能学”的有效途径。通过调整管理机制、共建共享资源、拓展两地产业数字化合作、两地交流社区教育资讯等途径,加强社区教育数字化平台的共建共享,促进两地社区教育工作的快速、稳健地发展。   [关键词]社区教育;共享共建;数字化资源   [中图分类号
期刊
[摘 要]为了解国内学习投入的研究现状, 文章以中国知网数据库从2011年到2020年近十年收录的2404篇学习投入相关的论文为研究对象,采用文献计量分析方法,运用CiteSpace 软件对发文时间、研究结构、作者和关键词進行可视化分析,结果发现:国内该领域研究的文献数量总体呈上升趋势;研究结构主要集中于高等院校;相关作者较多,但合作研究不够紧密;研究热点集中于定义、影响因素和中介变量等方面。  
期刊
数字图像是传递信息的重要载体,但是在采集或传递过程中易受到噪声、遮挡或像素丢失等多种形式的干扰。由于设备、时间等限制因素,在无法重新获取原始清晰图像的情况下,如何应用图像处理算法对所获取低质量图像进行干扰修复以还原出潜在高质量图像,已经成为研究者们极为关注的问题。图像修复技术通常利用低质量图像及其低质形成原因等信息,即其也称为低质量图像的先验条件,恢复或重建出消除噪声、移除遮挡或补全丢失像素的清晰图像,从而提高图像质量,使其能够应用于后续识别分类、语义理解等场景中。针对小样本、单样本图像数据的退化过程、对
近年来,受益于互联网和智能终端设备的迅速发展,各种应用不断涌现,但同时也带来了数据的爆炸式增长。为解决互联网上的信息过载的问题,推荐系统被提出并进一步推动了各类电商服务平台的创新和应用。为了使用户更好地理解推荐模型和结果,可解释性推荐正逐渐成为推荐系统研究领域的热点。在可解释推荐系统中,推荐模型不仅给出推荐列表,同时对推荐结果进行解释。基于此背景,本文尝试在深度学习技术中,首先利用层次注意力网络充分提取文本特征,以获得精准的用户和物品的表示。然后利用注意力网络和门控循环单元来融合显式特征和隐式特征,为推荐
随着智能手机和移动应用技术的发展,活动社交网络越来越流行。在ENSN中,人们可以在线上提前发布组织、线下参加各类活动。然而,由于人们可以自由地在线点击加入活动,其实际线下出席行为通常与线上有所不同。因此,如何对活动的实际出席情况进行准确预测,对活动组织者及活动开展具有重要的指导意义。
  已有的活动社交网络中进行出席预测的研究存在着如下几个问题。1.特定活动的预测精确度低,例如室外活动;2.忽视了活动本身之外的相关因素,例如活动举行当天的天气因素;3.部分活动内部因素尚未挖掘,影响人们出席活动的因素