面向大规模上下文流处理框架的研究与实现

被引量 : 0次 | 上传用户:xp1987627
下载到本地 , 更方便阅读
声明 : 本文档内容版权归属内容提供方 , 如果您对本文有版权争议 , 可与客服联系进行内容授权或下架
论文部分内容阅读
随着移动互联网的发展,移动设备尤其是智能手机得到了广泛的应用和普及。同时,因为这些移动设备具有各式各样的传感器、可以收集各种各样的传感数据,从而使得以移动设备为载体的移动群体感知成为可能,并在各个领域,如交通、医疗健康、环境监测等领域开始得以广泛应用。在移动群体感知应用中,数量众多的各种移动设备持续地收集各种上下文信息,并对收集的这些规模巨大的上下文信息进行实时处理,以便及时地从这种持续的数据流中获取整个系统的发展态势和及时地对用户的请求进行实时响应,从而为用户提供更好的服务,因此如何实时地处理规模巨大的上下文数据流信息是目前移动群体感知应用面临的巨大挑战。本文针对上述挑战,重点围绕群体感知应用中大规模上下文信息流处理技术展开研究,提出了一种基于分布式流计算平台S4的大规模上下文流处理模型,进而围绕该模型,对基于规则的上下文过滤机制、上下文聚合优化机制以及基于任务调度的事件捕获机制进行了深入研究,主要工作体现在以下几个方面:1)针对众多移动设备持续收集的上下文信息流规模大、种类多的问题,提出了一种基于规则的上下文信息过滤机制,该机制将基于Rete匹配算法的规则引擎与流计算平台S4的过滤逻辑处理单元有机结合起来,能够有效地对以简洁高效的JSON格式描述的感知信息流进行快速匹配及过滤。2)针对如何高效实时地对上下文信息流进行聚合问题,提出了一种上下文聚合优化机制,该机制基于文档对象模型,将S4中的聚合逻辑处理单元与文档型内存数据库有机地结合起来,可以有效地减少运行时磁盘的读写操作次数,从而提高感知信息流的聚合效率。3)针对如何实时地获取群体中某个个体的行为问题,提出了一种基于任务调度的事件捕获机制,该机制将群体感知与个体感知有机地结合起来,通过事件捕获机制能够实时地获取个体行为,从而可以有效地了解群体中某个个体的状况。基于上述工作,设计实现了一个面向群体感知的实时获取群体态势和个体行为的上下文流处理框架,并以城市交通态势感知案例为背景,开发了一个具体的上下文流处理应用,对该框架的有效性进行了验证。
其他文献
针对目前基于地磁信号车辆分类算法的不足,提出遗传BP神经网络车辆分类算法。对实验数据进行归一化和滤波去噪处理,以均值、方差、峰值个数、最小波谷值作为车辆分类特征,然
论述了国内外脂肪酸甲酯乙氧基化物的发展现状,主要对其合成工艺、催化剂、反应器形式、产品性能以及存在的问题进行了分析讨论,在此基础上对其发展趋势进行了分析。
罗素的摹状词理论取消了摹状词的指称功能,只保留专名的指称功能,由此罗素从柏拉图和梅农的共相实在论转向殊相实在论。在罗素把亲知作为专名的重要特征之后,他把普通专名当
电视新闻记者作为电视新闻的重要组成部分,在电视新闻传播中扮演着重要角色。电视新闻记者应当实现转型,为人们提供更高质量的新闻,使电视新闻更好地服务于人们。但是,受诸多
20世纪前期,天灾人祸的宿县已成"恶土"。赛珍珠诺贝尔奖作品《大地》对淮北农民疾苦的叙事具有强烈的现实性,从而获得很多赞许。但是赛珍珠客观上缺乏对"恶土"背后社会因素的
<正>"功"这节课选自人教版必修2第七章第2节.第一节"追寻守恒量"是为引入功,本节课是对初中"功"的概念的进一步拓展和深化,从简单到特殊,从一般到复杂.并进一步从功能关系的
<正>黑牡丹形态奇特,似岩石而又有生命,花色鲜艳,自然别致,充满野趣,国内外有不少爱好者收集栽培。品种特征黑牡丹为仙人掌科岩牡丹属多肉植物,具肥大的直性肉质根。植株初为
护理道德又称护理专业品格,是护理工作者的职业道德,是在护理活动中,调整护理人员与社会、患者以及同事间关系行为规范的总和。现今,随着护理学新的发展,对护理从业人员的职
轴系作为船舶最重要的部分,制造及加工要求都非常高。本文结合16000总吨客滚船轴系生产,对艉管镗孔(包括斜镗孔)、艉管轴承冷冻压入法、轴系总段对中等新工艺作了初步探讨。
中小企业的生存和发展是否良好,严重影响着国民经济适度增长、缓解就业压力、优化产业机构等。然而经济环境日益复杂多样,加剧了中小企业生存和发展存在的不确定性,更高的要