论文部分内容阅读
随着科学技术的飞跃提升,大数据时代已悄然来临,并加速形成蓬勃发展之势。大数据虽看似不同平常且远离生活,但实际上却给世界带来了巨大变革。其促使世界数据技术得以实现时代性的革新;促使人们生活更为便捷、工作更为高效;促进现实中各领域发展得以大幅度进步;促使世界加快向全球一体化迈进。大数据将在未来呈现出不可估量的价值。而在世界整体发展进程中,人们身边也呈现出一些新问题。其中恐怖主义作为非传统性安全问题便已成为全球危害,对我国也造成严重威胁。如何以高效、稳妥的方式应对恐怖主义,对积极打击暴恐势力,高效处置涉恐行为,全面防控恐怖袭击具有重要现实意义。本文以基于大数据的安全部门反恐情报平台设计与实现为研究方向。结合如何为安全部门反恐任务提供实时、可靠、高效涉恐情报的现实需求,对安全部门反恐情报体系编制、体制、信息化建设、现有平台建设等综合调研分析的基础上。按照安全部门反恐实际需要,设计和实现利用大数据技术的反恐情报平台。本文所做的主要工作如下:一、论述了大数据的定义、特征和发展;对本文采用的主要大数据技术Hadoop、No SQL、TF-ID、Mongo DB等进行了分析介绍;二、结合安全部门反恐实际需要,给出了反恐行动对大数据条件下情报的功能和性能需求;对平台进行总体分析和规划。三、对平台做出设计并构建平台模型。着重介绍了反恐情报平台侦搜、反恐情报平台研判和反恐情报平台服务三个子系统的设计。四、介绍了平台实现技术,包括对Mongo DB查询性能的实现和对Hadoop下的TF-IDF算法实现以及性能效果分析。最后给出了测试结果和分析。