论文部分内容阅读
随着World Wide Web(简称WWW,Web)的迅速发展,Web上的信息与日俱增,互联网已成为人们获取信息的重要来源。但是,由于因特网的广泛性和开放性,在因特网上发布信息极为容易而且不受限制,无论任何单位、团体、个人只要具备上网条件便可以自由地在因特网上发布信息,从而加剧了因特网信息的急速膨胀,使得Web的使用者找到对自己有用的信息的难度越来越大。因此,如何快速、准确地从浩瀚的信息资源中寻找所需的信息已经成为困扰用户的一个难题。目前,Blog作为Web 2.0中的代表,引起了大众传播方式的一种变革。自其出现以后,持续影响和改变着互联网的交流模式。互联网中Blog的数量成指数级的增加,从九十年代的数千个增长到2005年的过亿,这样庞大的信息量,就需要一个有效的搜索方法对Blog进行搜索。现在已经有很多Blog的搜索工具了:Blogdigger, Blogpulse ,和Technorati,而像Google, Yahoo!和AskJeeves这样的搜索引擎也已经提供了专门的Blog搜索。Blog搜索正处于一个发展的初级阶段,其蕴含着极大的研究潜力。论文的主要工作包括以下方面。1.基础理论研究:首先介绍了Web挖掘基础理论(包括Web挖掘的定义和Web挖掘的分类)、网络爬虫的系统结构和相关爬虫算法、中文分词的几种方法,然后提出了Blog搜索与排名的系统框架和三个功能模块的设计。2. Blog搜索引擎技术:首先介绍了搜索引擎的定义及基本构成、搜索引擎的分类,然后介绍了几种特色的搜索引擎,接着针对Blog的特点,提出了几种Blog搜索技术。3. Blog排名技术:Blog和普通Web网页的一个重要区别就是超链接,本文利用隐式链接等相关技术,提出了针对Blog的基于内容的排名算法。该算法不只考虑了Blog中的链接分析,还主要对Blog中的内容进行分析,挖掘Blog中的隐性特征,从而提高用户对Blog搜索结果的满意度。