[发明专利]一种文本分类方法及装置在审
申请号: | 202010332603.7 | 申请日: | 2020-04-24 |
公开(公告)号: | CN111666407A | 公开(公告)日: | 2020-09-15 |
发明(设计)人: | 陈家兵;陈涛;薛云;季家亮 | 申请(专利权)人: | 苏宁云计算有限公司 |
主分类号: | G06F16/35 | 分类号: | G06F16/35;G06F40/284;G06K9/62 |
代理公司: | 北京市万慧达律师事务所 11111 | 代理人: | 陈怡 |
地址: | 210000 江苏省南*** | 国省代码: | 江苏;32 |
权利要求书: | 查看更多 | 说明书: | 查看更多 |
摘要: | |||
搜索关键词: | 一种 文本 分类 方法 装置 | ||
本发明公开一种文本分类方法及装置,该方法至少包括如下步骤:基于预先设置的M种分类类型,分别采用N种分类算法计算待分类文本采用每一种分类类型分类时的评分tn,M≥2,N≥2,n=M*N;将属于同一种分类类型的N个评分tn进行加权融合,获得每一种分类类型的最终评分Tm;对所述M种分类类型的最终评分Tm进行排序,并选出最终评分Tm最高的类型作为所述待分类文本的最终分类类型,该方法基于预先设置的分类类型,通过多种算法相融合的方式获得一种准确度较高的文本分类结果。
技术领域
本发明涉及计算机数据处理领域,特别涉及一种文本分类方法及装置。
背景技术
文本分类,就在给定的分类体系下,根据文本的内容自动地确定文本关联的类别。文本分类是一个映射的过程,它将未标明类别的文本映射到已有的类别中,该映射可以是一一映射,也可以是一对多的映射,因为通常一篇文本可以同多个类别相关联。
然而,现有技术中至少存在如下问题:现有的文本分类方法存在分类不准确以及效率不高等问题。如已授权中国专利CN102073704A中公开的文本分类处理方法:其通过网络侧设备提供的分类参数,在用户设备上通过预先设置的模型进行分类,获取多个分类特征与分类参数的相关程度,并将文本存储在相关程度最高的文本信息主体中,实际上为根据文本特征与分类参数相关性进行分类的技术方案,其采用的算法较为单一,分类过程可能存在片面性较大的问题,最终获取的分类结果准确度不够高。
发明内容
为解决上述技术问题,本发明提供了一种文本分类方法及装置,其基于预先设定的分类类型,通过多种算法相融合的方法获得一种准确度较高的文本分类结果。
本发明提供的技术方案如下:
第一方面,提供一种文本分类方法,所述方法至少包括如下步骤:
基于预先设置的M种分类类型,分别采用N种分类算法计算待分类文本采用每一种分类类型分类时的评分tn,M≥2,N≥2,n=M*N;
将属于同一种分类类型的N个评分tn进行加权融合,获得每一种分类类型的最终评分Tm;
对所述M种分类类型的最终评分Tm进行排序,并选出最终评分Tm最高的类型作为所述待分类文本的最终分类类型。
在一些较佳的实施方式中,所述分别采用N种分类算法计算待分类文本采用每一种分类类型分类时的评分tn之前,还包括:获取训练文本集;
所述基于预先设置的M种分类类型,分别采用N种分类算法计算待分类文本采用每一种分类类型分类时的评分tn,包括:
分别计算预先获取的训练文本集中每一个分词的每一类型的条件概率;
获取待分类文本的特征向量;
利用所述训练文本集的条件概率与待分类文本的特征向量分别计算所述待分类文本采用每一种分类类型分类时的评分tn。
在一些较佳的实施方式中,获取训练文本集具体包括如下子步骤:
将样本集中的每一文本样本进行分词获得第一分词结果,并对每一文本样本进行预分类;
基于所述第一分词结果生成样本集词列表;
将每一文本样本的第一分词结果与所述样本集词列表对比,并以所述样本集词列表中是否存在所述第一分词结果中的分词进行分类,将所述样本集表示成向量形式,并作为训练文本集。
在一些较佳的实施方式中,所述获取待分类文本的特征向量,包括:
该专利技术资料仅供研究查看技术是否侵权等信息,商用须获得专利权人授权。该专利全部权利属于苏宁云计算有限公司,未经苏宁云计算有限公司许可,擅自商用是侵权行为。如果您想购买此专利、获得商业授权和技术合作,请联系【客服】
本文链接:http://www.vipzhuanli.com/pat/books/202010332603.7/2.html,转载请声明来源钻瓜专利网。