[发明专利]一种文档主题生成方法和装置有效
申请号: | 201611089622.1 | 申请日: | 2016-11-30 |
公开(公告)号: | CN106776547B | 公开(公告)日: | 2020-02-07 |
发明(设计)人: | 董从娇;龚珊珊;滕一勤 | 申请(专利权)人: | 北京先进数通信息技术股份公司 |
主分类号: | G06F40/258 | 分类号: | G06F40/258;G06F40/284;G06F40/289;G06F40/30 |
代理公司: | 11319 北京润泽恒知识产权代理有限公司 | 代理人: | 苏培华 |
地址: | 100089 北京市*** | 国省代码: | 北京;11 |
权利要求书: | 查看更多 | 说明书: | 查看更多 |
摘要: | 本发明实施例提供了一种文档主题生成方法和装置。所述方法包括:对文档集合的文档进行分词并提取出词语,统计表征所有提取的词语中两两之间的语义相关性的词间关系数据,统计表征每个词语在每个文档中的重要性的词语文档关系数据,迭代更新所述文档主题关系数据、词语主题关系数据和调整因子达到设定结束条件,以迭代更新得到的词语主题关系数据生成文档集合的文档主题。由此本发明使得最后生成的词语主题关系数据由词语文档关系数据和词间关系数据共同约束,实现了文档主题生成过程兼顾词语之间的语义关系,提高了文档主题生成的准确性。 | ||
搜索关键词: | 一种 文档 主题 生成 方法 装置 | ||
【主权项】:
1.一种文档主题生成方法,其特征在于,包括:/n对文档集合的文档进行分词并提取出词语;/n统计表征所有提取的词语中两两之间的语义相关性的词间关系数据;/n统计表征每个词语在每个文档中的重要性的词语文档关系数据;/n随机生成表征各个文档对于各预设主题的相关性的文档主题关系数据,以及表征各个词语对于各所述主题的相关性的词语主题关系数据;/n根据所述词语主题关系数据和词间关系数据生成调整因子;/n依据所述文档主题关系数据、词语主题关系数据和词语文档关系数据的关系,以及词语主题关系数据、调整因子和词间关系数据的关系,迭代更新所述文档主题关系数据、词语主题关系数据和调整因子达到设定结束条件,以使在确定词语文档关系数据和词间关系数据的情况下同时生成文档主题关系数据、词语主题关系数据和调整因子的目标概率达到设定要求,包括:第N次迭代用于生成最新的词语主题关系数据、文档主题关系数据以及调整因子;在第N+1次迭代中,根据第N次迭代中生成的最新的文档主题关系数据、词语主题关系数据和调整因子,生成所述词语主题关系数据在本次迭代中的第一调整值,并以所述第一调整值和设定的学习速率常数更新所述词语主题关系数据;在第N+1次迭代中,根据第N次迭代中生成的最新的文档主题关系数据和词语主题关系数据,生成所述文档主题关系数据在本次迭代中的第二调整值,并以所述第二调整值和设定的学习速率常数更新所述文档主题关系数据;在第N+1次迭代中,根据第N次迭代中生成的最新的词语主题关系数据和调整因子,生成所述调整因子在本次迭代中的第三调整值,并以所述第三调整值和设定的学习速率常数更新所述调整因子,直至达到所述设定结束条件结束迭代更新,使得所述目标概率达到设定要求;/n以迭代更新得到的词语主题关系数据生成文档集合的文档主题。/n
下载完整专利技术内容需要扣除积分,VIP会员可以免费下载。
该专利技术资料仅供研究查看技术是否侵权等信息,商用须获得专利权人授权。该专利全部权利属于北京先进数通信息技术股份公司,未经北京先进数通信息技术股份公司许可,擅自商用是侵权行为。如果您想购买此专利、获得商业授权和技术合作,请联系【客服】
本文链接:http://www.vipzhuanli.com/patent/201611089622.1/,转载请声明来源钻瓜专利网。
- 上一篇:一种关键词提取方法和装置
- 下一篇:一种文本的相似度计算的方法和装置