随着互联网的普及和多媒体技术的发展,多媒体信息在生活中的作用越来越大,人们对图像等多媒体数据的需求也越来越强烈。然而,传统的文本检索技术已经不能够适应多媒体信息的检索的需要。大规模图像数据库的发展也给传统的信息分析与检索技术提出了新的挑战。基于内容的多媒体检索方式的出现,解决了人们通过视觉特征检索图像的问题,但是,由于视觉特征不能够完全代表图像高层语义,基于内容的检索方式仍然不能解决高层语义图像检索的问题,而基于语义的图像检索则是解决这一问题的最佳出路。基于语义图像检索的关键问题是如何从底层视觉特征中提取出高层语义。按照高层语义来源,目前主要有三种语义提取方式,分别是基于外部信息源的语义提取、基于人工交互的语义提取和基于知识的语义提取。自动图像标注技术的出现是为了自动获取图像的语义信息,从而在语义级别上对检索做出支持。基于视觉特征的图像语义标注就是要从图像视觉特征提取出高层语义信息的关键词用来表示图像的语义。为了能够获取图像特征和文本描述之间的对应关系,许多机器学习方法被引入到这一领域中来。本文介绍了自动图像语义标注的研究背景;然后介绍基于知识的语义提取中使用到的图像分割、视觉特征提取的一般方法和具有代表性的自动图像语义标注模型,并在此基础上提出了本文的语义标注方案;为了提高图像分割的效率,提出了一种新的基于样本点缩减策略的窗口式聚类算法应用于图像分割中;本文还将基于语义的评分体系引入自动图像语义标注中,建立了基于评分的自动图像语义标注模型;最后,在理论研究的基础上,在语义图像检索的实际应用方面进行了进一步实践,开发了基于语义的图像检索系统SIRS。