[发明专利]文本相似度计算方法及装置、智能机器人在审
申请号: | 201810569749.6 | 申请日: | 2018-06-05 |
公开(公告)号: | CN108763569A | 公开(公告)日: | 2018-11-06 |
发明(设计)人: | 杨凯程;李健铨;蒋宏飞 | 申请(专利权)人: | 北京玄一科技有限公司 |
主分类号: | G06F17/30 | 分类号: | G06F17/30;G06F17/27 |
代理公司: | 北京弘权知识产权代理事务所(普通合伙) 11363 | 代理人: | 逯长明;许伟群 |
地址: | 100012 北京市朝阳区*** | 国省代码: | 北京;11 |
权利要求书: | 查看更多 | 说明书: | 查看更多 |
摘要: | |||
搜索关键词: | 相似度 文本相似度 文本 最长公共子序列 并集 计算方法及装置 智能机器人 交集 词汇集合 智能机器 聊天机器人 相似度计算 人本发明 用户提供 词汇 聊天 答复 服务 | ||
本发明实施例提供了一种文本相似度计算方法及装置、智能机器人,本发明实施例首先获取两个文本的最长公共子序列,之后对两个文本对应的词汇集合计算交集和并集,之后根据得到的交集和并集计算得到第一相似度,利用上述最长公共子序列对应的词汇集合以及之前得到的并集计算第二相似度,最后根据第一相似度和第二相似度计算得到两个文本的目标相似度。上述技术方案结合最长公共子序列以及文本中各个词汇,计算两个文本的相似度,有效提高了文本相似度的计算精度。进一步地,聊天机器人或智能机器人利用准确的文本相似度,能够为用户提供更加准确的答复,提高了聊天机器或智能机器人人的服务质量和用户的体验度。
技术领域
本发明实施例涉及文本处理技术领域,并且更具体地,涉及一种文本相似度计算方法及装置、智能机器人。
背景技术
聊天机器人是在大数据及人工智能技术驱动下产生的一个热门应用,在使用过程中,用户输入聊天内容,即用户输入其提出的问题,聊天机器人根据用户输入的问题,自动生成相应的回复,并反馈给用户。这种人工智能的处理方式能够在很大程度上提高服务效率和用户的体验度。目前存在多种类型的聊天机器人,比如苹果公司的Siri、微软公司的微软小娜(Cortana)与小冰、百度公司的度秘以及京东公司JIMI(JD,Instant MessagingIntelligence),此外还有很多其他类型的聊天机器人,比如儿童教育机器人、车载控制机器人等。
在利用聊天机器人进行智能问答的实际应用场景中,用户向聊天机器人提出问题,聊天机器人从用户提出的问题中提取到关键信息,并根据关键信息从知识库中选取相似的一个或多个预制问题,之后计算用户提出的问题与每个预制问题的相似度,并选取相似度最大的预制问题,最后将选取得到的与用户提出的问题相似度最大的预制问题,对应的答复反馈给客户,完成一次智能机器人的智能问答。
以上不管是用户提出的问题,还是知识库中存储的预制问题都是以文本的形式存在,计算用户提出的问题与每个预制问题的相似度,实质上是计算两个文本的相似度。现有技术中计算两个文本的相似度主要通过对文本进行分词,并利用得到各个词汇计算对应文本的相似度。其中存在的问题是各个单独的词汇并不能准确的表达对应文本的原始意义,这就造成了利用各个词汇计算得到的文本之间的相似度不准确,例如有两个文本:我喜欢你和你喜欢我,这两个文本的意义完全不同,但是两个文本分词后的词汇完全相同,那么利用现有技术计算得到的这两个文本的相似度是1,显然这是不准确的。进一步地,由于现有技术中计算文本的相似度不够准确,那么聊天机器人根据文本相似度为用户推送的答复也必定不够都准确,严重影响了聊天机器人的服务质量和用户的体验度。
发明内容
本发明实施例提供了一种文本相似度计算方法及装置、智能机器人,其能够结合最长公共子序列以及文本中各个词汇,计算两个文本的相似度,有效提高了文本相似度的计算精度,聊天机器人或智能机器人利用准确的文本相似度,能够为用户提供更加准确的答复,从而进一步提高了聊天机器人或智能机器人的服务质量和用户的体验度。
第一方面,提供了一种文本相似度计算方法,所述方法包括:
获取第一文本和第二文本的最长公共子序列;
分别对所述第一文本、第二文本和最长公共子序列进行分词处理,得到第一词汇集合、第二词汇集合和第三词汇集合;
计算所述第一词汇集合与所述第二词汇集合的交集,得到第一目标集合;计算所述第一词汇集合与所述第二词汇集合的并集,得到第二目标集合;
利用所述第一目标集合中每个词汇的预定权重和所述第二目标集合中每个词汇的预定权重计算第一相似度;利用第三词汇集合中每个词汇的预定权重和所述第二目标集合中每个词汇的预定权重计算第二相似度;
根据所述第一相似度和第二相似度,计算所述第一文本和第二文本的目标相似度。
该专利技术资料仅供研究查看技术是否侵权等信息,商用须获得专利权人授权。该专利全部权利属于北京玄一科技有限公司,未经北京玄一科技有限公司许可,擅自商用是侵权行为。如果您想购买此专利、获得商业授权和技术合作,请联系【客服】
本文链接:http://www.vipzhuanli.com/pat/books/201810569749.6/2.html,转载请声明来源钻瓜专利网。