可移植的稳健口语理解方法研究

来源 :上海交通大学 | 被引量 : 6次 | 上传用户:zhaoxiaoyan0
下载到本地 , 更方便阅读
声明 : 本文档内容版权归属内容提供方 , 如果您对本文有版权争议 , 可与客服联系进行内容授权或下架
论文部分内容阅读
口语对话系统(Spoken Dialogue System)的研究具有很强的理论意义和实际价值。口语理解(Spoken Language Understanding)是实现口语对话系统的关键技术之一。目前,口语理解主要面临两方面的挑战:稳健性(robustness),因为语音识别难免有错误,而且口语本身也往往是病态和不合语法的。可移植性(portability),当前对话系统中口语理解模块的开发往往需要大量手工工作(例如语义语法的编写),这构成了口语对话系统开发的主要瓶颈之一。因此,要缩短口语理解模块的开发周期、减少开发成本以及增强可移植性,关键是如何减少对手工工作的依赖,从而使整个开发过程自动化。本文提出了一种新的可移植的稳健口语理解方法。该方法基本上是数据驱动(data-driven)的,只需要简单标记的数据,这样保证了良好的可移植性。它能对口语进行深层理解,同时也能保持稳健性。论文的主要工作和创新点包括:本文提出了一个基于两阶段分类的口语理解框架。首先,第一阶段的分类器用来识别用户输入语句的主题,即主题分类(Topic Classi-fication)。接下来,识别的主题可用于帮助第二阶段的分类器抽取相应的语义槽/值对,即语义槽分类(Semantic Slot Classfication)。这两种分类器是可以自动学习的,而且只需要简单标记的训练数据。该框架既能保证对输入语句的深层理解,也能保持稳健性。利用一个稳健的基于图算法的局部分析器来对用户输入语句进行预处理。该局部分析器具有跳跃词和规则符的能力,这样从底层就保证了系统的稳健性。同时,为了避免跳跃能力带来的副作用,引入了内置的机器学习系统来进行剪枝和消歧。预处理使得数据标记形式更简单,能给主题分类提供深层的特征,还能减少语义槽分类器的数目。对于主题分类,考察了可用于主题分类的各种特征并且比较了它们的分类能力,并且利用多分类器相结合的方法来提高主题分类的精度。对于语义槽分类,把它建模为分类问题:首先利用文字上下文进行初始语义槽分类,然后检查语义槽的一致性,如有必要,再利用语义槽上下文进行重分类以纠正错误。本文比较了两种语义槽分类算法,即决策表和Winnow算法。为了进一步地减轻手工标记数据的工作,研究了上述两种分类器的弱监督训练方法:(1)采用了结合主动学习(active learning)和半监督学习(semi-supervised learning)来训练主题分类器的方法;(2)提出了一种实际的bootstrapping方法来训练语义槽分类器。这两种手段使得两阶段分类模型的训练只需要少量标记数据,而能利用较多的未标记数据来提高性能。最后,分别在两个不同领域和语种的语料库上对本文所提出的方法进行了实验验证。实验结果表明,本文方法在性能上优于已有的基于规则的方法,而跟其他新的数据驱动方法相当,但是能大大减少开发成本。
其他文献
目前我国社会冲突的治理是由政府单一主体把控的,从中央到地方强调"谁主管,谁负责",社会组织尚未成为有效的社会冲突治理主体。这是一种缺乏结构洞、网络密度大、群集度高的
<正>在线教育未来如何发展取决于两方面:一是行业自身的规范发展,包括建立准入门槛,明确从业标准,加强行业自律;二是我国教育改革能否落实高质量的素质教育,建立科学合理的评
<正>资产评估的内涵一是资产评估的主体是评估机构及其评估专业人员。评估机构是依法设立的从事资产评估业务的专业机构,评估专业人员包括评估师和其他具有评估专业知识及实
维数灾难问题是许多模式识别方法在实际应用中面临的主要问题,比如文本处理,图像识别。在低维空间里解析上或计算上行得通的方法,在高维空间里往往行不通。因此,降低维数有时就成
随着我国人才全面培养计划的不断推进,大学体育课程教学随之改革和发展。健美操课程是大学体育课程的重要组成部分,对健美操课教学改革是大学体育课程教学的重要课题。随着研究
<正>0引言目前大型机组的状态监测系统对机组的故障诊断和分析起着十分重要的作用。它的可靠性与否直接影响着机组的故障诊断和分析。要搞好大型旋转机械的机组状态监测分析,
本文主要研究移动事务服务网络MTSN中的移动事务转接和恢复中的问题以及相关的实现技术。 移动事务执行中发生跨区处理称为移动事务转接,也包括服务转接。由于移动计算环境
随着非正式学习的兴起,博物馆的职责和功能也逐渐从文物保护转型为公众教育服务。亲子家庭作为参观公众中的重要组成部分,学习对话作为参观学习的体现,是探索学习过程的重要
南宋理学思想集大成者朱熹在建构理学思想体系过程中,提出了以"变化气质以复性"为逻辑起点,以"明人伦"为核心的道德教化思想,对我国传统道德教育产生了深远影响,其诸多独树一