【摘 要】
:
大数据技术为精准扶贫提供新的思路和方法,但在大数据精准扶贫战略的实践过程中,存在着多源异构数据组织混乱、跨领域数据关联程度低、海量数据处理效率低等问题,严重阻碍了大数据先进技术优势的发挥,影响了精准扶贫战略的实施成效。数据融合技术能集成多源异构数据的优势信息,挖掘不同来源数据之间的关联关系,整合生成一套信息更丰富、现势性更好、语义更完整的高质量数据集。精准扶贫数据融合计算量大,传统的单机集中式处理
【基金项目】
:
国家重点研发计划“全息地图获取与位置信息聚合技术”,项目编号:2017YFB0503500
论文部分内容阅读
大数据技术为精准扶贫提供新的思路和方法,但在大数据精准扶贫战略的实践过程中,存在着多源异构数据组织混乱、跨领域数据关联程度低、海量数据处理效率低等问题,严重阻碍了大数据先进技术优势的发挥,影响了精准扶贫战略的实施成效。数据融合技术能集成多源异构数据的优势信息,挖掘不同来源数据之间的关联关系,整合生成一套信息更丰富、现势性更好、语义更完整的高质量数据集。精准扶贫数据融合计算量大,传统的单机集中式处理已经无法满足时效性的要求。研究基于分布式计算的精准扶贫数据融合技术,有利于提升精准扶贫数据的质量和处理效率,更好地支持精准扶贫战略的实施。本文从地理信息科学的视角出发,将空间数据融合技术应用到精准扶贫数据融合领域。在研究空间数据的预处理方法、集成方法、同名实体匹配方法、同名实体融合方法的基础上,结合精准扶贫数据融合逻辑复杂、融合规则动态变化、数据融合计算量大等特点,提出规则驱动的精准扶贫数据融合方法。该方法引入了分布式计算技术,提高了数据融合的效率,同时引入了规则引擎的思想,将复杂的融合逻辑抽象为若干简单的融合规则,由融合引擎负责对融合规则进行解译与执行,实现了融合规则制定与融合规则实现的解耦合,降低了融合逻辑的复杂度,且支持融合规则的动态修改。本文在规则驱动的精准扶贫数据融合方法的基础上,设计了规则驱动的精准扶贫数据融合技术实现框架,综合利用Map Reduce、Postgre SQL+Post GIS、Geotools等技术,设计实现了精准扶贫数据融合系统。利用该系统,实现了对播州区贫困、农业调查、土地权属、土地等级等多源异构数据的融合,派生出了2018年播州区贫困户所属土地的耕种状态数据,并对融合结果做了可视化应用,验证了规则驱动的精准扶贫数据融合方法的可行性和有效性。实验证明,规则驱动的精准扶贫数据融合方法能有效解决精准扶贫数据组织混乱、跨领域数据关联程度低、海量数据处理效率低等问题。目前,该方法已经应用到贵州省、湖北省的精准扶贫数据融合项目中,取得了较好的应用效果。
其他文献
随着人们生活水平的提高和环保意识的增强,社会对内墙涂料的要求不仅仅是要美观、防护性好,更需要绿色环保,对人体无害,对环境友好。黄原胶和刺槐豆胶为两种不同的多糖,是天然可再生材料,无毒无害,资源丰富,价格低廉,使用多糖基料代替以石油为生产原料的合成乳液,能够有效的减少对不可再生资源的消耗。本论文以黄原胶和刺槐豆胶为原料,以粘度,稳定性,成膜性能为指标,对多糖的溶解温度和浓度进行筛选。然后以水溶性高分
粘合衬布是服装工业的主要辅料,应用于服装的内层起到补强、挺括等作用,可以简化服装制作,提高生产效率,降低生产成本,更能显示出现代服装特定的风格。随着人们生活水平的不断提高,人们对于服装消费理念正在发生变化,在多功能面料的基础上更加追求舒适环保和健康。纯棉衬布本身具有吸湿透气、穿着舒适等优点,可以提高服装的档次而被广大消费者青睐,但棉织物存在水洗后缩水率大的问题,严重影响着服装的外观品质。目前,工厂
混凝土重力坝岩基(包括基岩和胶结面)的整体稳定分析一直都是研究的热点问题。对于大尺度坝体岩基来说,所选择的抗剪断强度参数1)′和(8′的大小是否合理将直接影响到坝工建设的安全性和经济性,然而由于缺乏具有充分理论依据的计算方法,至今都是根据小尺度试块的抗剪试验成果并依赖经验与半经验的方法整理而得到的,因而受人为因素的影响较大。基于此,本文将随机场理论和逾渗临界理论相结合,研究同一地质单元内的大尺度岩
良好的员工职业生涯管理,一是对员工而言,可以根据自己的性格、职业发展兴趣、爱好、知识、技能等方面的情况,对自己的定位和未来的职业所做的选择或者规划,可以实现自己的人生理想和抱负,得到社会的认可并证明自己的人生价值。二是对组织而言,对员工进行职业生涯管理,可以吸引和留住优秀人员,充分发挥员工的潜能,实现人岗匹配、才尽其用,最大限度地调动员工的工作积极性,增强员工的归属感,为组织获得持续的竞争优
在全球变化和气候问题日益凸显的背景下,水文过程的描述和模拟成为热点研究问题。分布式水文模型方程基于物理机制,参数具有物理意义,能真实地描述流域水文循环,并且为科学地揭示降雨径流形成机理提供依据。分布式水文模型的应用广泛,包括水资源开发利用、防洪减灾、面源污染、水库调度及人类活动的流域响应等多个方面。分布式水文模型参数反映了流域下垫面的特性,然而由于多方面的原因,在实际应用过程中大多借助实测的水文资
可见光作为一种绿色可再生资源,近年来在有机合成领域已得到广泛的应用。胺类化合物在天然产物、药物分子中广泛存在,对胺类化合物进行改造和修饰一直是研究的热点。其中实现对胺类化合物氮邻位C(sp3)-H官能化反应可以向α位上引入新的官能团,从而构建更多具有应用价值的化合物。虽然通过过渡金属催化的策略可以实现此类反应,但是该策略往往需要苛刻的反应条件以及价格昂贵的金属催化剂。相比之下,利用光催化实现此类反
基于GNSS的全球陆地范围内的导航与定位技术获得了长足发展,取得了厘米级定位精度,而水下导航与定位技术在国内正处于高速发展的阶段,将GNSS定位技术拓展到海洋领域势在必行。水下远距离通信有效方式为水声通信,水声通信Modem是水下通信的关键节点,设计适用于通信与定位的水声通信Modem是推广水下GNSS技术的前提和基础。本文基于上述背景和项目需求,设计了一款高速水声通信Modem原型样机,包括硬件
近年来,伴随着民间借贷市场活跃程度的不断提高,我国整体的民间借贷合同纠纷数量也在不断攀升。笔者以上海市法院判决的田某、周某与中原信托有限公司借贷合同纠纷案为例,借案例所涉及借款合同利率认定引发的纠纷,延伸至民间借贷纠纷发生的多种原因。本文基于法律经济学的视角,分别从民间借贷纠纷的法律性质、民间借贷纠纷的现状与产生原因展开研究。通过以小见大的方式,采用调查分析、规范分析与博弈论分析的研究方法,得出货
目的建立高效液相色谱法研究大鼠口服没食子酸后在体内的组织分布特征,并通过大鼠单向肠灌流实验研究没食子酸的肠吸收特征及外排转运蛋白对其的影响,同时用代谢组学方法研究没食子酸对角叉菜胶致足趾肿胀大鼠的抗炎作用机制,为提高没食子酸口服制剂的生物利用度及进一步的临床应用提供理论基础。方法(1)正常大鼠按50 mg·kg-1灌胃给予没食子酸后取各组织,采用沉淀蛋白法预处理生物组织样品,色谱柱:Fortis-
目前,重金属污染已成为全世界最为严峻的环境问题之一。环境中的重金属元素含量超标不仅会给人类健康带来巨大威胁,而且会影响整个生态系统的良性循环。因此,对于各类环境样品实施有效的监测变得至关重要。样品前处理技术作为样品分析过程中的关键一步,承担将分析物从复杂的原始基质中富集并分离至溶剂中的工作,决定了最终分析结果的可靠性。经过几十年的发展,样品前处理技术已从早期的费时费力的工作变得越来越简单、方便,与