[发明专利]一种基于义原扩展的短文本分类预处理方法、系统及装置有效
申请号: | 201910060245.6 | 申请日: | 2019-01-22 |
公开(公告)号: | CN109885680B | 公开(公告)日: | 2020-05-19 |
发明(设计)人: | 郑建华;刘双印;朱蓉;贺超波;徐龙琴;张世龙;冯大春 | 申请(专利权)人: | 仲恺农业工程学院 |
主分类号: | G06F16/35 | 分类号: | G06F16/35 |
代理公司: | 广州嘉权专利商标事务所有限公司 44205 | 代理人: | 薛建强;何文聪 |
地址: | 510225 广东省广州市*** | 国省代码: | 广东;44 |
权利要求书: | 查看更多 | 说明书: | 查看更多 |
摘要: | 本发明公开了一种基于义原扩展的短文本分类预处理方法、系统及装置,方法包括:对需要分类的短文本进行初步处理,得到原始词向量;对原始词向量中的每个词进行义原扩展处理,得出扩展词向量,进而形成候选扩展词向量集合;对候选扩展词向量集合中的扩展词向量进行语义相似度计算,筛选得出语义相似度最大的那组扩展词向量作为特定词向量;将原始词向量与特定词向量组进行加权处理,得出待分类词向量。本发明有效解决了原文信息量不足的缺点,而且由于采用了义原扩展方式,这样同时也避免了后期分类算法选择的局限性,同时也能较好的对于新出现的词具有较好的识别作用,为后续分类算法的泛化性能提升提供帮助,大大提高了后续分类的准确率。 | ||
搜索关键词: | 一种 基于 扩展 文本 分类 预处理 方法 系统 装置 | ||
【主权项】:
1.一种基于义原扩展的短文本分类预处理方法,其特征在于,包括以下步骤:对需要分类的短文本进行初步处理,得到原始词向量;对原始词向量中的每个词进行义原扩展处理,得出扩展词向量,进而形成候选扩展词向量集合;对候选扩展词向量集合中的扩展词向量进行语义相似度计算,筛选得出语义相似度最大的那组扩展词向量作为特定词向量;将原始词向量与特定词向量组进行加权处理,得出待分类词向量;将待分类词向量输入至分类器中进行文本分类。
下载完整专利技术内容需要扣除积分,VIP会员可以免费下载。
该专利技术资料仅供研究查看技术是否侵权等信息,商用须获得专利权人授权。该专利全部权利属于仲恺农业工程学院,未经仲恺农业工程学院许可,擅自商用是侵权行为。如果您想购买此专利、获得商业授权和技术合作,请联系【客服】
本文链接:http://www.vipzhuanli.com/patent/201910060245.6/,转载请声明来源钻瓜专利网。