[发明专利]词库生成方法和装置在审
申请号: | 201710668364.0 | 申请日: | 2017-08-08 |
公开(公告)号: | CN109388689A | 公开(公告)日: | 2019-02-26 |
发明(设计)人: | 路绪海;杨迪;马怡安;龚靖;任华;王铮;黄挺 | 申请(专利权)人: | 中国电信股份有限公司 |
主分类号: | G06F16/332 | 分类号: | G06F16/332;G06F16/9535;G06F17/27 |
代理公司: | 中国国际贸易促进委员会专利商标事务所 11038 | 代理人: | 曹蓓 |
地址: | 100033 *** | 国省代码: | 北京;11 |
权利要求书: | 查看更多 | 说明书: | 查看更多 |
摘要: | 本申请提出一种词库生成方法和装置,涉及人工智能技术领域。本发明的一种词库生成方法,包括:步骤i):根据开源词库确定基本词汇库;步骤ii):根据基本词汇库,基于词频统计的分词方法处理部分语料文本,获取更新词汇;步骤iii):以预定策略利用更新词汇更新基本词汇库;循环执行步骤ii)、iii),直至完成全部语料文本的处理;根据更新后的基本词汇库建立词库。通过这样的方法,能够基于已有的开源词库,通过处理语料文本的方式对词库进行更新,再用更新后的词库去处理语料文本,循环该过程,能够基于具有时效性的语料文本更新词库,从而使词库能够不断的更新和丰富,在无需依赖输入法的情况下得到最新词库。 | ||
搜索关键词: | 词库 语料 更新 文本 方法和装置 人工智能技术 词汇更新 词频统计 循环执行 预定策略 时效性 输入法 分词 词汇 申请 | ||
【主权项】:
1.一种词库生成方法,其特征在于,包括:步骤i):根据开源词库确定基本词汇库;步骤ii):根据所述基本词汇库,基于词频统计的分词方法处理部分语料文本,获取更新词汇;步骤iii):以预定策略利用所述更新词汇更新所述基本词汇库;循环执行步骤ii)、iii),直至完成全部语料文本的处理;根据更新后的所述基本词汇库建立词库。
下载完整专利技术内容需要扣除积分,VIP会员可以免费下载。
该专利技术资料仅供研究查看技术是否侵权等信息,商用须获得专利权人授权。该专利全部权利属于中国电信股份有限公司,未经中国电信股份有限公司许可,擅自商用是侵权行为。如果您想购买此专利、获得商业授权和技术合作,请联系【客服】
本文链接:http://www.vipzhuanli.com/patent/201710668364.0/,转载请声明来源钻瓜专利网。