[发明专利]一种新词提取方法及装置有效

专利信息
申请号: 202110190709.2 申请日: 2021-02-20
公开(公告)号: CN112560448B 公开(公告)日: 2021-06-22
发明(设计)人: 蓝建敏;池沐霖 申请(专利权)人: 京华信息科技股份有限公司
主分类号: G06F40/216 分类号: G06F40/216;G06F40/289
代理公司: 广州三环专利商标代理有限公司 44202 代理人: 郭浩辉;颜希文
地址: 510520 广东省广州*** 国省代码: 广东;44
权利要求书: 查看更多 说明书: 查看更多
摘要:
搜索关键词: 一种 新词 提取 方法 装置
【权利要求书】:

1.一种新词提取方法,其特征在于,包括:

获取给定语料,并对所述给定语料进行分词处理,获得若干第一词组;其中,所述给定语料包括若干篇文章;

计算每一所述第一词组的凝固度和自由度,继而提取凝固度和自由度符合预设阈值条件的若干第一词组,作为第二词组;

计算每一所述第二词组在所述给定语料中各文章的篇频;其中,所述篇频为词组在一篇文章中出现的次数;

根据各所述文章的文章影响力对每一所述第二词组的各篇频进行加权计算,获得各所述第二词组的加权篇频;

根据每一所述第二词组的加权篇频进行排序,并根据排序结果提取出新词。

2.如权利要求1所述的新词提取方法,其特征在于,通过以下公式计算一所述文章的文章影响力:

其中,为待评估文章、为待评估文章的文章影响力、为引用了待评估文章的文章集合、为集合中的一篇文章、为文章的影响力,为文章所引用的文章数量。

3.如权利要求1所述的新词提取方法,其特征在于,在获得若干第二词组之后,在计算每一所述第二词组在所述给定语料中各文章的篇频之前,还包括:

剔除开头或结尾为停用词的第二词组。

4.如权利要求1所述的新词提取方法,其特征在于,还包括:在提取出所述新词后,根据各所述新词所属文章的领域类型,设置所述新词的类别标签,对所述新词进行分类。

5.一种新词提取装置,其特征在于,包括分词处理模块、第二词组提取模块、篇频计算模块、加权篇频计算模块以及新词提取模块;

所述分词处理模块,用于获取给定语料,并对所述给定语料进行分词处理,获得若干第一词组;其中,所述给定语料包括若干篇文章;

所述第二词组提取模块,用于计算每一所述第一词组的凝固度和自由度,继而提取凝固度和自由度符合预设阈值条件的若干第一词组,作为第二词组;

所述篇频计算模块,用于计算每一所述第二词组在所述给定语料中各文章的篇频;其中,所述篇频为词组在一篇文章中出现的次数;

所述加权篇频计算模块,用于根据各所述文章的文章影响力对每一所述第二词组的各篇频进行加权计算,获得各所述第二词组的加权篇频;

所述新词提取模块,用于根据每一所述第二词组的加权篇频进行排序,并根据排序结果提取出新词。

6.如权利要求5所述的新词提取装置,其特征在于,还包括停用词剔除模块;所述停用词剔除模块,用于剔除开头或结尾为停用词的第二词组。

7.如权利要求5所述的新词提取装置,其特征在于,还包括:新词分类模块;

所述新词分类模块,用于在提取出所述新词后,根据各所述新词所属文章的领域类型,设置所述新词的类别标签,对所述新词进行分类。

下载完整专利技术内容需要扣除积分,VIP会员可以免费下载。

该专利技术资料仅供研究查看技术是否侵权等信息,商用须获得专利权人授权。该专利全部权利属于京华信息科技股份有限公司,未经京华信息科技股份有限公司许可,擅自商用是侵权行为。如果您想购买此专利、获得商业授权和技术合作,请联系【客服

本文链接:http://www.vipzhuanli.com/pat/books/202110190709.2/1.html,转载请声明来源钻瓜专利网。

×

专利文献下载

说明:

1、专利原文基于中国国家知识产权局专利说明书;

2、支持发明专利 、实用新型专利、外观设计专利(升级中);

3、专利数据每周两次同步更新,支持Adobe PDF格式;

4、内容包括专利技术的结构示意图流程工艺图技术构造图

5、已全新升级为极速版,下载速度显著提升!欢迎使用!

请您登陆后,进行下载,点击【登陆】 【注册】

关于我们 寻求报道 投稿须知 广告合作 版权声明 网站地图 友情链接 企业标识 联系我们

钻瓜专利网在线咨询

周一至周五 9:00-18:00

咨询在线客服咨询在线客服
tel code back_top