[发明专利]关键词的提取方法及装置有效
申请号: | 201910703459.0 | 申请日: | 2019-07-31 |
公开(公告)号: | CN110427626B | 公开(公告)日: | 2022-12-09 |
发明(设计)人: | 崔峭 | 申请(专利权)人: | 北京明略软件系统有限公司 |
主分类号: | G06F40/30 | 分类号: | G06F40/30;G06F40/216;G06F40/289 |
代理公司: | 北京康信知识产权代理有限责任公司 11240 | 代理人: | 江舟 |
地址: | 100086 北京市海淀区*** | 国省代码: | 北京;11 |
权利要求书: | 查看更多 | 说明书: | 查看更多 |
摘要: | |||
搜索关键词: | 关键词 提取 方法 装置 | ||
1.一种关键词的提取方法,其特征在于,包括:
对输入的文本进行文本结构分析,以确定所述文本中各个内容类型对应的第一权重值;
对所述文本中的各个词语进行语义分析,以确定各个词语对应的第二权重值;
根据所述第一权重值和所述第二权重值对各个所述词语的词语频率TF值进行调整,并通过调整后的所述TF值计算各个所述词语的第三加权值;
根据所述第三加权值,提取所述词语中指定词语作为用于进行检索的关键词;
其中,对所述文本中的各个词语进行语义分析,以确定指定词语对应的第二权重值,包括:
按照预设的词性优先级规则对各个所述词语进行排序;
按照所述词性优先级的顺序对各个所述词语赋予对应的所述第二权重值;
其中,通过调整后的所述TF值计算各个所述词语的第三加权值,包括:
获取各个所述词语的IDF值;
根据调整后的各个所述词语的TF值以及所述各个所述词语的IDF值确定所述第三权重值;
其中,根据所述第三加权值,提取所述词语中指定词语作为用于进行检索的关键词,所述方法还包括:
去除所述词语中所述第三权重值小于预设权重阈值的词语作为所述指定词语。
2.根据权利要求1所述的方法,其特征在于,在对所述文本中的词语进行语义分析之前,所述方法还包括:
按照预设规则对所述文本进行分词处理,以及,
根据分词后的所述各个所述词语之间的关联性确定各个所述词语的词性。
3.根据权利要求1所述的方法,其特征在于,根据所述第一权重值和所述第二权重值对各个所述词语的词语频率TF值进行调整,还包括:
获取各个所述词语的所述TF值;
将所述TF值与所述第一权重值和所述第二权重值相乘,以确定调整后的所述TF值。
4.根据权利要求1所述的方法,其特征在于,所述内容类型至少包括以下其中之一:
所述文本中按照预设文本格式划分的文本内容类型,所述文本中段落的位置类型,所述文本中语句的位置类型。
5.一种关键词的提取装置,其特征在于,包括:
第一确定模块,用于对输入的文本进行文本结构分析,以确定所述文本中各个内容类型对应的第一权重值;
第二确定模块,用于对所述文本中的各个词语进行语义分析,以确定各个词语对应的第二权重值;
调整模块,用于根据所述第一权重值和所述第二权重值对各个所述词语的词语频率TF值进行调整,并通过调整后的所述TF值计算各个所述词语的第三加权值;
提取模块,用于根据所述第三加权值,提取所述词语中指定词语作为用于进行检索的关键词;
其中,所述第二确定模块,还用于按照预设的词性优先级规则对各个所述词语进行排序,并按照所述词性优先级的顺序对各个所述词语赋予对应的所述第二权重值;
其中,所述调整模块,还用于获取各个所述词语的IDF值,并根据调整后的各个所述词语的TF值以及所述各个所述词语的IDF值确定所述第三权重值;
其中,所述提取模块,还用于去除所述词语中所述第三权重值小于预设权重阈值的词语作为所述指定词语。
6.一种存储介质,其特征在于,所述存储介质中存储有计算机程序,其中,所述计算机程序被设置为运行时执行所述权利要求1至4任一项中所述的方法。
7.一种电子装置,包括存储器和处理器,其特征在于,所述存储器中存储有计算机程序,所述处理器被设置为运行所述计算机程序以执行所述权利要求1至4任一项中所述的方法。
该专利技术资料仅供研究查看技术是否侵权等信息,商用须获得专利权人授权。该专利全部权利属于北京明略软件系统有限公司,未经北京明略软件系统有限公司许可,擅自商用是侵权行为。如果您想购买此专利、获得商业授权和技术合作,请联系【客服】
本文链接:http://www.vipzhuanli.com/pat/books/201910703459.0/1.html,转载请声明来源钻瓜专利网。
- 上一篇:实体关系抽取方法及装置
- 下一篇:基于语义表示模型的任务处理方法和装置