[发明专利]一种近义词的获取方法及系统有效
申请号: | 201711453916.2 | 申请日: | 2017-12-28 |
公开(公告)号: | CN108153735B | 公开(公告)日: | 2021-05-18 |
发明(设计)人: | 谢忠玉;鲍新平;沈一 | 申请(专利权)人: | 北京奇艺世纪科技有限公司 |
主分类号: | G06F40/284 | 分类号: | G06F40/284;G06F40/289;G06F40/247 |
代理公司: | 北京集佳知识产权代理有限公司 11227 | 代理人: | 王宝筠 |
地址: | 100080 北京市海淀*** | 国省代码: | 北京;11 |
权利要求书: | 查看更多 | 说明书: | 查看更多 |
摘要: | |||
搜索关键词: | 一种 近义词 获取 方法 系统 | ||
1.一种近义词的获取方法,其特征在于,包括:
确定指定评价词与指定评价对象在文本中的共现频率;
构建共现词矩阵,所述共现词矩阵包括:多个评价对象,多个评价词,以及所述多个评价对象中每个所述评价对象与所述多个评价词中每个所述评价词的共现频率,其中,所述多个评价对象中至少包括所述指定评价对象,所述多个评价词中至少包括所述指定评价词;
对所述共现词矩阵中的所述多个评价词进行降维处理,得到评价词向量;
通过第一相似度计算方式计算所述评价词向量的第一相似度,确定与所述指定评价词相似度高于预定数值的候选评价词集合;
通过第二相似度计算方式对所述候选评价词集合进行相似度排序,得到相似度排序结果,通过所述相似度排序结果,以及所述候选评价词集合与所述指定评价词的词性是否相同的判断结果确定所述指定评价词的近义词;
所述通过所述相似度排序确定所述指定评价词的近义词,包括:
确定所述候选评价词集合中与所述指定评价词相似度最高的评价词为第一评价词,所述第一评价词与所述指定评价词的词性相同;
判断与所述第一评价词相似度最高的评价词是否为所述指定评价词;
若是,将所述第一评价词确定为所述指定评价词的近义词。
2.根据权利要求1所述的方法,其特征在于,所述确定指定评价词与指定评价对象在文本中的共现频率,包括:
对包括指定评价对象及指定评价词的文本进行分词处理;
确定所述文本中指定评价对象在指定评价词预定范围内的共现频率。
3.根据权利要求2所述的方法,其特征在于,所述确定所述文本中指定评价对象在指定评价词预定范围内的共现频率,包括:
当所述指定评价对象出现在与所述指定评价词相距在预定数量之内的第一评价对象集合中时,确定所述指定评价对象在指定评价词预定范围内;
确定所述文本中指定评价对象在指定评价词预定范围内的共现频率。
4.根据权利要求1所述的方法,其特征在于,所述确定与所述指定评价词相似度高于预定数值的候选评价词集合,包括:
从与所述指定评价词相似度高于预定数值的多个评价词中确定指定数量的评价词作为候选评价词集合。
5.根据权利要求1所述的方法,其特征在于,所述通过所述相似度排序结果,以及所述候选评价词集合与所述指定评价词的词性是否相同的判断结果确定所述指定评价词的近义词,包括:
选取所述候选评价词集合中的各候选评价词与所述指定评价词的词性相同的评价词作为待选评价词集合;
将所述待选评价词集合中的各待选评价词与所述指定评价词进行相似度排序,得到相似度排序结果,根据所述相似度排序结果确定所述待选评价词集合中与所述指定评价词相似度最高的评价词作为所述指定评价词的近义词。
6.根据权利要求1所述的方法,其特征在于,所述构建共现词矩阵,所述共现词矩阵包括:多个评价对象,多个评价词,以及所述多个评价对象中每个所述评价对象与所述多个评价词中每个所述评价词的共现频率,其中,所述多个评价对象中至少包括所述指定评价对象,所述多个评价词中至少包括所述指定评价词,包括:
构建词性相同的共现词矩阵,所述词性相同的共现词矩阵包括:多个评价对象,多个评价词,以及所述多个评价对象中每个所述评价对象与所述多个评价词中每个所述评价词的共现频率,其中,所述多个评价对象中至少包括所述指定评价对象,所述多个评价词中至少包括所述指定评价词,其中,所述多个评价词的词性与所述指定评价词词性相同。
该专利技术资料仅供研究查看技术是否侵权等信息,商用须获得专利权人授权。该专利全部权利属于北京奇艺世纪科技有限公司,未经北京奇艺世纪科技有限公司许可,擅自商用是侵权行为。如果您想购买此专利、获得商业授权和技术合作,请联系【客服】
本文链接:http://www.vipzhuanli.com/pat/books/201711453916.2/1.html,转载请声明来源钻瓜专利网。
- 上一篇:一种文本处理方法及装置
- 下一篇:一种基于向量空间模型的关系词映射方法