[发明专利]一种文本数据处理方法及装置有效
申请号: | 201210534859.1 | 申请日: | 2012-12-12 |
公开(公告)号: | CN103870440B | 公开(公告)日: | 2016-11-30 |
发明(设计)人: | 凌俊民;刘晓峰;梁耿;李广杰;韦媚 | 申请(专利权)人: | 中国移动通信集团广西有限公司 |
主分类号: | G06F17/22 | 分类号: | G06F17/22;G06F17/30 |
代理公司: | 北京同达信恒知识产权代理有限公司 11291 | 代理人: | 郭润湘 |
地址: | 530000 广*** | 国省代码: | 广西;45 |
权利要求书: | 查看更多 | 说明书: | 查看更多 |
摘要: | |||
搜索关键词: | 一种 文本 数据处理 方法 装置 | ||
1.一种文本数据处理方法,应用于交互问答系统中,所述交互问答系统中存储有至少一个问题文本,每一问题文本对应有至少一个答案文本,其特征在于,包括:
接收用户针对任一问题文本提交的的新答案文本;
将所述新答案文本分词,得到所述新答案文本包含的所有词语;
根据所述新答案文本包含的所有词语以及第一预设算法确定所述新答案文本对应的响应变量参数,其中,所述第一预设算法根据所述交互问答系统中已存储的所述问题文本与该问题文本对应的至少一个答案文本确定,所述响应变量参数表示所述新答案文本与所述问题文本之间的匹配程度。
2.如权利要求1所述的方法,其特征在于,按照以下公式确定所述新答案文本对应的响应变量参数:
E[b|w,α,β,η,σ2]为所述答案文本对应的响应变量参数;
z为所述问题文本及所述交互问答系统中存储的该问题文本对应的至少一个答案文本中所包含的主题;
w为所述新答案文本包含的所有词语;
α,β,η,σ2分别为根据所述问题文本及所述交互问答系统中存储的该问题文本对应的至少一个答案文本和第二预设算法确定出的参数。
3.如权利要求2所述的方法,其特征在于,按照以下公式确定
N表示所述问题文本及所述交互问答系统中存储的该问题文本对应的至少一个答案文本中所包含的词语的数量。
4.如权利要求2所述的方法,其特征在于,所述第二预设算法包括期望最大化EM算法。
5.如权利要求1所述的方法,其特征在于,还包括:
根据所述响应变量参数,在预先建立的响应变量参数与匹配参数之间的映射关系中,查找所述响应变量参数对应的匹配参数,所述匹配参数表示所述新答案文本的价值。
6.一种文本数据处理装置,应用于交互问答系统中,所述交互问答系统中存储有至少一个问题文本,每一问题文本对应有至少一个答案文本,其特征在于,包括:
接收单元,用于接收用户针对任一问题文本提交的的新答案文本;
分词单元,用于将所述新答案文本分词,得到所述新答案文本包含的所有词语;
确定单元,用于根据所述新答案文本包含的所有词语以及第一预设算法确定所述新答案文本对应的响应变量参数,其中,所述第一预设算法根据所述交互问答系统中已存储的所述问题文本与该问题文本对应的至少一个答案文本确定,所述响应变量参数表示所述新答案文本与所述问题文本之间的匹配程度。
该专利技术资料仅供研究查看技术是否侵权等信息,商用须获得专利权人授权。该专利全部权利属于中国移动通信集团广西有限公司,未经中国移动通信集团广西有限公司许可,擅自商用是侵权行为。如果您想购买此专利、获得商业授权和技术合作,请联系【客服】
本文链接:http://www.vipzhuanli.com/pat/books/201210534859.1/1.html,转载请声明来源钻瓜专利网。