[发明专利]关键词的提取方法、装置、电子设备及可读存储介质有效
| 申请号: | 202110977679.X | 申请日: | 2021-08-24 |
| 公开(公告)号: | CN113743112B | 公开(公告)日: | 2023-09-12 |
| 发明(设计)人: | 张鑫睿;刘欢;王海威;陈坤斌;和为 | 申请(专利权)人: | 北京百度网讯科技有限公司 |
| 主分类号: | G06F40/289 | 分类号: | G06F40/289;G06F40/216 |
| 代理公司: | 北京市通商律师事务所 11951 | 代理人: | 巩靖 |
| 地址: | 100085 北京市*** | 国省代码: | 北京;11 |
| 权利要求书: | 查看更多 | 说明书: | 查看更多 |
| 摘要: | |||
| 搜索关键词: | 关键词 提取 方法 装置 电子设备 可读 存储 介质 | ||
1.一种关键词的提取方法,包括:
确定目标文本的第一分词在所述目标文本所包含的各个句子中的第一词频;
对所述第一词频进行平滑处理得到第二词频,所述平滑处理用于降低不同数值的各所述第一词频之间的差值;
基于所述第二词频确定所述第一分词在所述目标文本中的第三词频;
基于所述第三词频计算所述第一分词的第一关键度;
基于所述第一关键度从所述第一分词中确定第一关键词。
2.根据权利要求1所述的方法,其中,所述对所述第一词频进行平滑处理得到第二词频,包括以下任一项:
对所述第一词频进行开平方运算,得到第二词频;
响应于所述第一词频大于预设值,根据预设规则缩小所述第一词频得到第二词频。
3.根据权利要求1所述的方法,其中,所述基于所述第三词频计算所述第一分词的第一关键度,包括:
确定所述第一分词在所述目标文本中的逆文档频率;
基于所述逆文档频率与所述第三词频确定第一关键度。
4.根据权利要求3所述的方法,其中,所述基于所述第一关键度从所述第一分词中确定第一关键词,包括:
基于所述第一关键度以及所述第一分词所对应的词类型权重,确定第二关键度;
基于所述第二关键度从所述第一分词中确定第一关键词。
5.根据权利要求4所述的方法,其中,所述基于所述第二关键度从所述第一分词中确定第一关键词,包括:
基于所述第二关键度由高到低的顺序对所述第一分词进行排序;
将所述排序中前预设数量的第一分词确定为第一关键词。
6.根据权利要求1所述的方法,还包括:
基于预配置的词性规则对所述第一关键词进行过滤,得到第二关键词。
7.根据权利要求6所述的方法,所述词性规则包括以下至少一项:
所述第一关键词的词性不属于预设词性;
对所述第一关键词的进行分词处理得到的第二分词为单字词;
对所述第一关键词的进行分词处理得到的第二分词中不存在相同词性的第二分词,且所述第二分词均不属于预设词集合。
8.根据权利要求6所述的方法,还包括:
将预设个数的第二关键词进行组合,得到组合词;
确定所述组合词在所述目标文本中的第四词频是否满足预设词频条件;
响应于所述组合词在所述目标文本中的第四词频满足预设词频条件,基于所述第二关键词以及所述组合词,确定第三关键词。
9.根据权利要求8所述的方法,所述基于所述第二关键词以及所述组合词,确定第三关键词,包括:
将用于组合成所述组合词的第二关键词确定为被替换词;
将除所述被替换词之外的所述第二关键词以及所述组合词确定为所述第三关键词。
10.根据权利要求1-9中任一项所述的方法,在所述确定目标文本的第一分词在所述目标文本所包含的各个句子中的第一词频之前,所述方法还包括:
对所述目标文本进行分词处理得到分词结果;
将所述分词结果中满足预设的筛选条件的词确定为所述第一分词。
11.一种关键词的提取装置,包括:
第一词频确定模块,用于确定目标文本的第一分词在所述目标文本所包含的各个句子中的第一词频;
第二词频确定模块,用于对所述第一词频进行平滑处理得到第二词频,所述平滑处理用于降低不同数值的各所述第一词频之间的差值;
第三词频确定模块,用于基于所述第二词频确定所述第一分词在所述目标文本中的第三词频;
关键词提取模块,用于基于所述第三词频计算所述第一分词的第一关键度;基于所述第一关键度从所述第一分词中确定第一关键词。
该专利技术资料仅供研究查看技术是否侵权等信息,商用须获得专利权人授权。该专利全部权利属于北京百度网讯科技有限公司,未经北京百度网讯科技有限公司许可,擅自商用是侵权行为。如果您想购买此专利、获得商业授权和技术合作,请联系【客服】
本文链接:http://www.vipzhuanli.com/pat/books/202110977679.X/1.html,转载请声明来源钻瓜专利网。





