基于聚集约束条件的不确定数据清洗与Top-k查询

来源 :国防科学技术大学 | 被引量 : 0次 | 上传用户:zhengrs_2009
下载到本地 , 更方便阅读
声明 : 本文档内容版权归属内容提供方 , 如果您对本文有版权争议 , 可与客服联系进行内容授权或下架
论文部分内容阅读
随着技术的进步和人们对数据采集和处理技术理解的不断深入,不确定性数据(uncertain data)得到了广泛的重视。在许多现实的应用中,例如经济、军事、金融、电信等领域,数据的不确定性普遍存在,对不确定数据进行处理显得尤为重要。对不确定数据进行研究和处理过程中,经常遇到的也是最难解决的就是可能世界实例“空间爆炸”问题,由于不确定数据的特殊性,同等规模的不确定数据库较传统确定数据库处理的复杂度和困难程度要大得多。本文主要研究了基于聚集约束的不确定数据清洗与Top-k查询,在研究过程中发现,无论不确定数据清洗还是查询,都存在判断可能世界实例是否满足聚集约束条件的过程,当不确定数据集元组个数较多时,会面临可能世界实例“爆炸”的问题。本文针对不确定数据清洗和查询问题,对基于聚集约束条件的不确定数据清洗与Top-k查询进行了研究,主要研究工作体现在以下两点:1.分析了基于聚集约束对不确定数据进行清洗面临的主要问题,并建立了完善的数学模型,将清洗问题转化成了一个非线性最优化问题。根据本文研究的问题中,不确定数据元组值是离散的数值这一特点,在现有改进的非常快速模拟退火(MVFSA)算法基础上,通过重新设计算法的随机扰动方式,提出了针对本文特定问题的MVFSA算法。实验结果表明,本文提出的MVFSA算法较传统的SA算法在清洗得到的结果质量和算法的效率上都有较大的提高。2.针对基于聚集约束进行Top-k查询过程中,可能世界实例多,难以逐一判断是否满足约束这一问题,提出了一种基于采样的多链MCMC方法。本文首先通过寻找多个满足约束条件的初始点,然后从这些初始点出发,运用多条马尔科夫链同时进行采样,采集得到的样本能够很好的反映整个可能世界实例空间的分布,最后对样本集进行Top-k查询得到最终的查询结果。实验结果表明,Top-k查询中运用多链的MCMC采样方法得到的查询结果很接近真实的结果,而且算法效率大大优于运用简单的随机采样进行查询的方法。
其他文献
我读了《我爸爸就是一只熊猫》这篇文章很感动。为作者的真心真情而感动。我们平时写作过多地强调语言华丽优美、构思新颖,却忽略了写作最基本的理念——真情真意。  法国文学家狄德罗说过一句话:“没有感情这个品质,任何笔调都不能打动人心。”这句话很明确地告诉我们:文章想要打动人心就要有感情。没有真情的文章就如那剪纸一般,美丽却没有生命力。  怎样写出充满真情感动人心的文章?我想关键在于下面三点。  ·动人先
期刊
以往向你索要钱,买来心仪的冰棍。但如今,我明白——    仰望蓝天,又想起了你忙碌而疲惫的身影。夜阑人静,窗外闪烁着刺眼的彩灯。是啊,大街上名车有价、钻石有价,人们据其所有。  但,我坚信,亲情无价。  我总是任性、顽皮,自称天下无敌,但内心实在脆弱。倔强使我跌伤,你将我扶起,而我却用小小的拳头愤怒地捶打你。而你,却总是从口袋里拿出一根根香香的棒棒糖,哄我开心。  我对书自小有着浓厚的兴趣。你知道
期刊
一篇好的小小说,少不了叫人称奇的桥段,或者一个令人拍案叫绝的结局。桥段即使再老套,用对了地方,也会收获不错的效果。    刘大伯家是卖猪肉的。  每天凌晨三四点,刘大伯就起来,在村里宰猪,把猪肉运到集市去卖。刘大伯刚摆好摊子,就有一大批人涌上来,争着买他的新鲜猪肉。他们说,刘大伯卖的猪肉是农家饲料养殖的,不含瘦肉精,而且价格适中,不像其他商家,趁着“健美猪热潮”,狮子大开口。不一会,刘大伯的猪肉便
期刊
花蕾是蛹,是一种未经展示未经破坏的浓缩的美。花蕾是正月的灯谜,未猜中前可以有一千个谜底。花蕾是胎儿,似乎浑淹无知,却有时喜欢用强烈的胎动来证实自己。  花的美在于它的无中生有,在于它的穷通变化。有时,一夜之间,花拆了,有时,半个上午,花胖了,花的美不全在色、香,在于那份不可思议。我喜欢慎重其事地坐着等昙花开放,其实昙花并不是太好看的一种花,它的美在于它的仙人掌的身世的给人的沙漠联想,以及它猝然而逝
期刊
我终于想通了,我还是长吧,长大了就不再受老天爷的气了。    我的命运不如你,我是一棵长在峭壁上的树。  我是一棵松树。几年前,我还是一颗松果里的一员,无情的风把我们吹到了这里,同伴们都摔到了万丈深渊去了,生死未卜,而我独自留在了这荒芜险峻的峭壁上。  在这样的环境下,我还是存活了下来。现在,我是一棵松苗,一棵没人同情的松苗,一棵孤独的松苗,一棵怕死的松苗。瞬息万变的天空,常常令我害怕不己。  就
期刊
在我的眼里,父亲时而对我要求严格,时而又很宽松,他让我捉摸不透。    很久以前看过一篇文章《拐角处的回头》,那是第一次知道父爱是深沉的,是不溢于言表的。  父亲的爱藏在细小的行动中,一个微不足道的生活细节有时包含了父亲浓浓的爱。还记得那天,父亲远道而来开家长会,顺便带了我喜欢吃的东西,还有一瓶蜂蜜。可是,我不喜欢喝蜂蜜,我觉得太甜了,便要父亲带回去。父亲犹豫了一下,说:“喝点蜂蜜对身体好。”我生
期刊