[发明专利]一种计算文本主题模型的方法及装置有效
申请号: | 201611261218.8 | 申请日: | 2016-12-30 |
公开(公告)号: | CN106802940B | 公开(公告)日: | 2019-06-07 |
发明(设计)人: | 赵耕弘;张霞;赵立军;崔朝辉 | 申请(专利权)人: | 东软集团股份有限公司 |
主分类号: | G06F16/35 | 分类号: | G06F16/35;G06K9/62 |
代理公司: | 北京集佳知识产权代理有限公司 11227 | 代理人: | 王宝筠 |
地址: | 110179 辽*** | 国省代码: | 辽宁;21 |
权利要求书: | 查看更多 | 说明书: | 查看更多 |
摘要: | 本申请公开了一种计算文本主题模型的方法及装置,方法包括:获取目标文本,所述目标文本中含有多个目标词;获取训练文本集合中每个训练文本的训练主题的分布概率;获取所述训练文本集合中每个训练主题的训练词的分布概率;基于所述训练文本集合中每个训练主题的训练词的分布概率,获取每个所述训练主题中每个所述目标词的分布概率,其中的目标词为出现在所述训练词中的词;获取所述训练文本集合各个所述训练主题的分布概率;获取所述目标文本中每个所述目标词在各个所述训练主题的分布概率;获取所述目标文本中各个训练主题的分布概率,以得到所述目标文本的主题模型。 | ||
搜索关键词: | 一种 计算 文本 主题 模型 方法 装置 | ||
【主权项】:
1.一种计算文本主题模型的方法,其特征在于,包括:获取目标文本,所述目标文本中含有多个目标词;利用预设的文本主题模型计算方法,对训练文本集合中的训练文本进行主题模型的计算,得到每个所述训练文本中关于各个训练主题的分布概率P(t|d);利用预设的文本主题模型计算方法,对训练文本集合中的训练文本进行主题模型的计算,得到每个所述训练文本中每个训练主题中训练词的分布概率P1(w|t);基于所述训练文本集合中每个训练主题的训练词的分布概率P1(w|t),获取每个所述训练主题中每个所述目标词的分布概率P2(w|t),P2(w|t)中的目标词为出现在所述训练词中的词;利用P(t)=∑d∈DP(t|d)P(d),获取所述训练文本集合各个所述训练主题的分布概率P(t),D为所述训练文本集合,P(d)预设为1;利用
获取所述目标文本中每个所述目标词在各个所述训练主题的分布概率P(t|w),P(w)是每个所述目标词在所述训练文本集合中的分布概率;利用
获取所述目标文本中各个训练主题的分布概率,以得到所述目标文本的主题模型,wi为所述目标文本中第i个目标词,P(t|wi)为目标词wi为训练主题t的分布概率,d为所述目标词的集合。
下载完整专利技术内容需要扣除积分,VIP会员可以免费下载。
该专利技术资料仅供研究查看技术是否侵权等信息,商用须获得专利权人授权。该专利全部权利属于东软集团股份有限公司,未经东软集团股份有限公司许可,擅自商用是侵权行为。如果您想购买此专利、获得商业授权和技术合作,请联系【客服】
本文链接:http://www.vipzhuanli.com/patent/201611261218.8/,转载请声明来源钻瓜专利网。
- 上一篇:一种解决数据冲突的方法和系统
- 下一篇:一种答复信息的生成方法和设备