[发明专利]一种中文分词系统在审
申请号: | 202010689156.0 | 申请日: | 2020-07-17 |
公开(公告)号: | CN111832299A | 公开(公告)日: | 2020-10-27 |
发明(设计)人: | 岳希;向春淼;唐聃;高燕;曾琼 | 申请(专利权)人: | 成都信息工程大学 |
主分类号: | G06F40/289 | 分类号: | G06F40/289;G06F40/242 |
代理公司: | 成都云纵知识产权代理事务所(普通合伙) 51316 | 代理人: | 熊曦 |
地址: | 610225 四川省成都*** | 国省代码: | 四川;51 |
权利要求书: | 查看更多 | 说明书: | 查看更多 |
摘要: | 本发明公开了一种中文分词系统,涉及自然语言处理技术领域,所述系统包括:文本获取模块,用于获得文本文件数据;文本预处理模块:用于对文本文件数据进行预处理,获得待分词文本数据;分词模块:用于基于词典对待分词文本数据进行分词处理,获得文本数据分词结果;新词发现模块:用于对文本数据分词结果进行互信息计算,基于互信息计算结果识别新词,并将识别的新词存入分词模块的分词词典中。本发明优化了分词的召回率和准确率,其有了较大的提高;解决了专业领域中专业词库的新词来源;优化了搜索到要匹配的词语的速度,也大大提高了整体分词速度。 | ||
搜索关键词: | 一种 中文 分词 系统 | ||
【主权项】:
暂无信息
下载完整专利技术内容需要扣除积分,VIP会员可以免费下载。
该专利技术资料仅供研究查看技术是否侵权等信息,商用须获得专利权人授权。该专利全部权利属于成都信息工程大学,未经成都信息工程大学许可,擅自商用是侵权行为。如果您想购买此专利、获得商业授权和技术合作,请联系【客服】
本文链接:http://www.vipzhuanli.com/patent/202010689156.0/,转载请声明来源钻瓜专利网。