某客服问答系统中问句识别及文本相似度识别子系统的设计与实现

来源 :北京邮电大学 | 被引量 : 0次 | 上传用户:hhy0412
下载到本地 , 更方便阅读
声明 : 本文档内容版权归属内容提供方 , 如果您对本文有版权争议 , 可与客服联系进行内容授权或下架
论文部分内容阅读
随着人类社会的不断发展和科技的持续进步,在大数据的背景下,人们对自然语言智能识别的技术需求变得愈加迫切。大数据和人工智能已经渗透到了日常生活的方方面面,客服行业也因为互联网的发展和大数据时代的来临而迎来了新的挑战和变革,使得人们对于客服行业也有了新的期望。自然语言处理研究应运而生,它是属于人工智能解决大数据问题的重要分支。问答系统英文叫做 QA(Question Answering),是 NLP(Natural Language Processing)的一个重要应用领域。近些年来,自然语言处理领域已经取得了众多丰硕的研究成果,这是个很有实用价值的方向。搜索引擎的未来,很可能就是QA+阅读理解,机器学会阅读理解,理解了每篇文章,然后对于用户的问题,直接返回答案。智齿科技有限公司决定推出一款针对客服领域的智能问答系统,实现从输入业务领域语料到输出问答系统的自动化系统。而问答系统构建一定程度上依赖文本解意和用户意图识别,对语料数据进行QA对抽取,在实际应用中难免会出现机器不能理解文本意思,无法正确识别Q(Question)和A(Answer),而导致问答系统不能准确的抽取所有QA对;另外,中文问句表达一个意思有无数种话术问法,作为可通用智能问答系统,当用户的提问不存在于“问答—答案”对时,需要在已有的“问题—答案”对集合中找到与用户提问相匹配的问句,并将其对应的答案返回给用户。为了解决上述两个问题和实现问答系统QA对的匹配和识别,问句识别和文本相似度识别显得非常必要。北京智齿博创科技有限公司决定推出一款针对客服领域的智能问答系统,实现从业务方对话语料的输入到问答库输出的自动化构建并采用智能方法实现对客服问答平台使用者的问题智能返回最相关的回答。本文提出基于上述思路实现问答系统过程中的两个关键技术步骤:问句识别和文本相似度识别,并搭建独立的问句识别和文本相似度识别子系统。目的有以下几点:一是在问答系统是中首先能把问题和非问题做出正确的识别,才可能针对问题给出相应的回答;二是针对问答系统使用者提出的新问题,能够在已有问题中找到最相似的问题答案作为问答系统的答案返回给使用者,这也代表问答系统中同样语意的问题应该用同样的回答来做出回应;三是由于问句识别和文本相似度识别是问答系统实现的重要步骤,很大程度影响着问答系统的质量和使用效果,并且也可以作为独立自然语言处理任务而存在,所以搭建问句识别和文本相似度识别子系统可以对问句识别和文本相似度识别这两个独立任务进行分析和使用。本文成功完成了问句识别和文本相似度识别子系统的全部构建工作。作为问答系统子系统,通过中文问句识别和中文文本相似度识别,对最终实现问答系统完成了必不可少的重要一步。
其他文献
钢铁材料以其相对低廉的价格,相对较高的强度和韧性而被广泛地应用于海洋平台。由于海水具有腐蚀性,因此海洋用钢必须具有一定的耐蚀性。止裂钢是一种高强度抗裂纹扩展的钢种
电影的人物对白是理解电影故事情节的重要因素,也是展现人物形象,塑造人物性格的手段。本文从语言学的角度,基于Grice 的合作原则以及Leech的礼貌原则,对电影《当幸福来敲门
在经济全球化和文化多元化的背景下,中美文化差异直接影响着两国的跨文化交流。本文以霍夫斯泰德的文化维度理论为基础,比较了中美文化差异,旨在促进中美跨化交流,增进相互了
全国十九大会议上,习总书记再次强调了高素质干部队伍对我党任务目标实现的重要意义[1]。伴随社会经济剧烈冲击,市场经济呈现出多元化发展趋势,我党的工作任务以及党务干部的
在许多工业钢结构应用中,残余应力的存在对结构的力学性能和寿命有着重大影响。本课题组提出压痕隆起量测量法不仅能获得残余应力的大小还可判断其方向。但是压痕法会对试件
本文研究一种微损伤冲击压痕的方法测量残余应力。该方法拟对冲击压痕周边的变形或称隆起量与残余应力的内在联系进行研究,期望不仅获得残余应力的大小,也能通过隆起量的变化
五十至七十年代出现的"合作化"小说塑造了一大批各具特色的女性形象。所谓"一方水土养一方人",在这些有不同地域指归的合作化小说中,女性所表现出来的特质和她们赖以生存的土
<正>目的:水族斗角舞,亦称斗牛舞,水语称dǒu qui或dǒuɑɑɑ,即"斗贵"或"都刀",有时也叫"贵都刀",汉译为"水牛打角",意即斗牛、斗角。斗角舞表现为以牛角道具代牛,在芦笙节
会议
当前,由于我国民办高等教育的教学管理落后于其他国家民办高等教育事业的发展进程,因此我国民办高等教育的管理方式有必要从"管理"角度转向"治理"。2002年《民办教育促进法》
当前,中国的清算制度可以划分成破产清算和非破产清算两类,非破产清算在立法和理论讨论层面均较为欠缺,仍有诸多难题需要进一步分析,清算义务人制度是这之中必不可少的一部分。清算义务人即为其和企业之间具有的特点法律关系为基础当企业解散后对企业履行依法进行清算义务,同时在企业没有尽快清算给有关权利人致使其经济受到损失时需要承担起相关的民事责任。虽然最高人民法院有关《关于适用<中华人民共和国公司法>