基于知识图谱的文本反垃圾算法的实现与应用

来源 :南京大学 | 被引量 : 0次 | 上传用户:guangtoucx
下载到本地 , 更方便阅读
声明 : 本文档内容版权归属内容提供方 , 如果您对本文有版权争议 , 可与客服联系进行内容授权或下架
论文部分内容阅读
几乎所有的在线社交应用平台都存在垃圾文本,其中的垃圾信息包括广告、色情、暴力等,这些垃圾文本严重影响了社交平台的社交生态环境。微博作为一个拥有超过4亿月活跃用户的社交平台,同样也受到垃圾文本的影响,提高微博文本的垃圾识别率对于维护健康的社交环境非常重要。本文针对广告类垃圾文本的识别效果进行改进。广告类垃圾文本中包含大量的商品实体名、品牌名等专有名词,理解它们背后的语义有助于垃圾广告识别效果的提升,本文提出利用实体概念化的方式来挖掘短文本背后的语义,利用商品知识图谱JdGraph将垃圾广告文本中的专有名词映射到相关的概念集合中,用概念来表示文本内容。在实体概念化的基础上,使用预训练词向量将概念词向量与文本词向量拼接得到“概念-短文本”词向量,将它输入到本文设计的卷积神经网络算法模型KPCNN中进行特征学习。在微博短文本数据集上进行实验,对比不同特征输入,不同算法的分类效果,可以得出结论,知识图谱是挖掘短文本语义的有效方式,通过实体概念化,KPCNN的分类准确率比表现最好的基准算法高出了7%。
其他文献
电镀行业排放大量废水,重金属镍是废水中的主要有毒物质。近年来,我国对电镀行业中镍的排放限值要求日趋严格,为废水深度处理提出了新挑战。该行业废水处理的最大难题是化学镀镍废水,废水中含有多种有机络合剂,通过螯合作用提高Ni的稳定性,导致单一传统的物化处理工艺难以实现Ni的稳定达标排放。臭氧化耦合物化处理联合工艺可以有效去除含镍络合物,但对实际废水处理效果仍有待进一步验证。另一方面,废水中Ni的赋存形态
学位
学位
学位
随着电影产业化的深入,国产犯罪片近几年异军突起,成为了电影行业和观众的焦点,不仅斩获国内外电影节的各大奖项,也取得了良好的票房成绩。自2013年起,国产犯罪片在创作上有所转向,以犯罪者为中心,不仅更加尖锐的展现出社会病症,还更加注重挖掘犯罪者的精神世界和个体生存状态。在带给观众视听上的冲击与精神上的释放的同时,也让观众无意识的挖掘犯罪者表征中所蕴含的主体性异化的内涵。这既是国产犯罪片对主体性的追问
广藿香[Pogostemon cablin(Blanco.)Benth.]为唇形科刺蕊草属植物,自古以来广藿香已广泛用作药材,其具有拮抗病原菌、抗肿瘤、抗氧化、杀虫等药理作用。由于内生真菌能产生与宿主植物类似和结构新颖的次生代谢产物,研究广藿香内生真菌及其次生代谢产物对于诠释广藿香与内生真菌的生态互作具有重要科学意义。本论文对广藿香根、茎、叶、花各部位的内生真菌进行分离,采用显微形态观察和ITS序
英语学习包括听、说、读、看、写等方面的技能,其中写作是检测学生英语水平的重要标准之一,也是英语教学与学习中的重点和难点。2017年英语新课程标准对写作的要求是学生能写出语意连贯且结构完整的短文,能够叙述事情或表达观点和态度。提高英语写作水平的基础是语言输入。在信息技术高度发达的时代,教师应该积极利用图片、音乐、视频等资源进行多模态写作教学,扩展学生学习和运用英语的渠道,提高写作教学效果。多模态教学
政治自由是孟德斯鸠毕生的追求,他的鸿篇巨著《论法的精神》所论述的核心要义之一便是对政治自由的保障体系建设。因此,梳理并系统性的展现出孟德斯鸠在该书中所阐述的政治自由保障理论便显得尤为重要。根据孟德斯鸠对政治自由保障在“政制”与“公民”两个层面的划分,可将政治自由区分为“与政制相关联的政治自由”即政制自由和“与公民相关联的政治自由”即公民自由,《论法的精神》中的政治自由保障理论主要阐述的便是对这两个
学位
学位