[发明专利]一种基于广义特征词库的公共数据分级方法在审
申请号: | 202010066137.2 | 申请日: | 2020-01-20 |
公开(公告)号: | CN111309904A | 公开(公告)日: | 2020-06-19 |
发明(设计)人: | 陈磊;刘迎风;储昭武;管红;潘佳;唐若培;徐洁 | 申请(专利权)人: | 上海市大数据中心 |
主分类号: | G06F16/35 | 分类号: | G06F16/35;G06K9/62 |
代理公司: | 上海申新律师事务所 31272 | 代理人: | 吴轶淳 |
地址: | 200040 上*** | 国省代码: | 上海;31 |
权利要求书: | 查看更多 | 说明书: | 查看更多 |
摘要: | 本发明涉及自然语言处理技术领域,具体涉及一种基于广义特征词库的公共数据分级方法,包括:步骤S1,建立广义特征词库;步骤S2,对待分类文本进行预处理,并调用所述广义特征词库对预处理后的所述待分类文本进行正则匹配,生成新待分类文本,得到所述新待分级文本的多分级标签;步骤S3,运用分词工具对所述新待分类文本进行分词,得到文本词集;对所述文本词集进行分字处理,形成字符,通过TF‑IDF算法将所述字符转换成特征向量矩阵;步骤S4,将所述特征向量矩阵输入到一文本分类器中,生成文本分级模型,并输出所述待分级文本的分级结果。本发明可以大大提高公共数据分级效率、速度和准确率。 | ||
搜索关键词: | 一种 基于 广义 特征 词库 公共 数据 分级 方法 | ||
【主权项】:
暂无信息
下载完整专利技术内容需要扣除积分,VIP会员可以免费下载。
该专利技术资料仅供研究查看技术是否侵权等信息,商用须获得专利权人授权。该专利全部权利属于上海市大数据中心,未经上海市大数据中心许可,擅自商用是侵权行为。如果您想购买此专利、获得商业授权和技术合作,请联系【客服】
本文链接:http://www.vipzhuanli.com/patent/202010066137.2/,转载请声明来源钻瓜专利网。