基于多视角特征融合的文本语句深度交互匹配模型

来源 :深圳大学 | 被引量 : 0次 | 上传用户:hudaxia110
下载到本地 , 更方便阅读
声明 : 本文档内容版权归属内容提供方 , 如果您对本文有版权争议 , 可与客服联系进行内容授权或下架
论文部分内容阅读
语句匹配是自然语言理解中的一个核心问题,因此语句匹配的研究可以应用到大量已知的自然语言处理任务中,例如信息检索、自动问答、机器翻译、对话系统、释义识别等。这些自然语言处理的任务都可以在一定程度上抽象成文本匹配问题,比如信息检索可以归结为查询项和文档的匹配,自动回答可以归结为问题和候选答案的匹配,机器翻译可以归结为两种语言间的匹配,对话系统可以归结为前一句对话和回复的匹配,复述问题则可以归结为两个同义词句的匹配。在一系列的自然语言处理任务中,都需要依靠文本语句匹配模型的参与和协作。文本语句匹配模型的性能,会很大程度影响这些自然语言处理任务的最终表现。本文研究基于多视角特征融合的文本语句匹配模型,主要做了以下三部分的工作:(1)从词语交互的视角改进匹配模型,提出基于方面级情感差异分布的注意力机制,并且结合多轮决策机制来实现多轮次的词语交互匹配。首先,本文提出了基于方面级情感差异分布的注意力机制来改进跨句词语之间的交互,并且利用情感空间位置感知向量来改进句内词语的交互,使得模型在句内词语交互和跨句词语交互的过程中具备了语句主观情感差异的感知能力。然后,本文引入了基于记忆状态累积的多轮决策机制,通过迭代更新工作记忆状态来多轮次地进行匹配决策,使得模型能够更好地理解复杂句子的语义。(2)从语句表征的视角改进匹配模型,结合句法图卷积和自注意力机制构建语句表征。本文利用自注意力机制来抽取句子的语义信息,通过多维度的特征提取来获得高质量的句子表征。此外,为了解决自注意力机制对于词语位置信息编码能力弱的问题,本文结合句法图卷积来改进位置编码机制,在句子表征构建的过程中引入了结构化的位置信息。(3)将词语交互和语句表征的思路相结合,融合多视角的特征来共同实现语句匹配。基于词语交互的匹配模型的缺点是对于全局的特征捕捉能力弱,可能会损失一些整体的语句特征信息。基于语句表征的匹配模型的缺点是对于局部词语的语义感知能力弱,容易忽略一些重要词语之间的对应关系。针对这些缺点,本文将结合上述两类匹配模型的优势,将词语交互和语句表征的方法相互结合,融合词语的细粒度特征和语句的粗粒度特征,多视角联合共同实现语句的匹配。使模型既能够感知词语之间的交互,捕捉到局部的语义特征,又能够从全局的角度理解句子的整体语义,从而获得更好的匹配结果。
其他文献
学位
学位
学位
目的:单激素受体(HR)阳性乳腺癌近年来被认为是临床特点和预后有别于双激素受体阳性或阴性肿瘤的较为独立的存在。在初诊确诊乳腺癌转移患者中,转移的部位以及预后与乳腺癌分子分型相关,目前少有探讨转移性乳腺癌不同单激素受体亚型的临床病理及预后特点的相关报道。本研究通过分析人表皮生长因子受体-2(HER-2受体)阴性的Ⅳ期的患者的临床病理特点,转移模式,以及预后的风险因素,探讨单激素受体阳性,HER-2阴
学位
学位
学位
可拉伸电子作为柔性电子学未来发展的趋势,在生物医学领域、公共卫生事业、娱乐、教育和制造业等领域拥有广阔的应用前景和商业价值。可拉伸电子的发展自然离不开各式各样的传感器,其中,光电传感器因具有无创、反应快和易于调整等优点,非常适合应用在人体体表进行生理信号检测。然而,传统的光电传感器大多存在质地坚硬、贴敷性差以及环境适应性较差等问题,无法满足多形变应用场景的要求。本论文以有机光敏晶体管为光电传感器的
相对于立体视频,自由视点视频(Free-viewpoint Video,FVV)在倾入感和交互性方面更占优势,是未来数字视频应用的重点发展方向。因当前存储和带宽的制约,无法实现大量数据从FVV采集端到显示端的高效实时传送。虚拟视点绘制方法,作为FVV系统的核心算法,能将少量视点数据合成更多的视点数据,尤其是基于深度图的绘制(Depth-image-based Rendering,DIBR)方法,因
随着印刷行业的蓬勃发展,市场对印刷产品质量的要求愈发严格。传统的人工检测印刷品缺陷的方式存在效率低、主观性强、漏检率高且舒适性差等缺点。机器视觉技术的发展推进了生产过程的智能化进程,印刷品缺陷的视觉检测方式由此产生,并凭借其高效、准确和客观等特点逐渐成为近些年的研究热点。基于上述背景,论文以典型的机器视觉检测原理为基础,对印刷品缺陷检测技术展开研究。根据医药软包装材料在印刷过程中的运动特性,对编码