[发明专利]新词发现方法、装置、终端及服务器在审
申请号: | 201910727163.2 | 申请日: | 2016-11-23 |
公开(公告)号: | CN110516235A | 公开(公告)日: | 2019-11-29 |
发明(设计)人: | 谢瑜;张昊;朱频频 | 申请(专利权)人: | 上海智臻智能网络科技股份有限公司 |
主分类号: | G06F17/27 | 分类号: | G06F17/27 |
代理公司: | 11332 北京品源专利代理有限公司 | 代理人: | 孟金喆<国际申请>=<国际公布>=<进入 |
地址: | 201803 上海市嘉*** | 国省代码: | 上海;31 |
权利要求书: | 查看更多 | 说明书: | 查看更多 |
摘要: | 一种新词发现方法、装置、终端及服务器,新词发现方法包括:对原始语料进行新词发现操作,以得到新词候选词;对所述原始语料进行分词,以得到第一分词结果;基于所述第一分词结果拆分所述新词候选词得到所述新词候选词的子部分,其中所述新词候选词的子部分包含在所述第一分词结果中,所述新词候选词包括至少两个所述第一分词结果中的词;计算所述新词候选词与其子部分的语义相似度;如果所述语义相似度小于设定阈值,则将所述新词候选词确定为新词。本发明技术方案提高了新词提取的效率和精准度。 | ||
搜索关键词: | 候选词 分词结果 新词发现 语义相似度 原始语料 新词提取 精准度 分词 服务器 终端 | ||
【主权项】:
1.一种新词发现方法,其特征在于,包括:/n对原始语料进行新词发现操作,以得到新词候选词;/n对所述原始语料进行分词,以得到第一分词结果;/n基于所述第一分词结果拆分所述新词候选词得到所述新词候选词的子部分,其中所述新词候选词的子部分包含在所述第一分词结果中,所述新词候选词包括至少两个所述第一分词结果中的词;/n计算所述新词候选词与其子部分的语义相似度;/n如果所述语义相似度小于设定阈值,则将所述新词候选词确定为新词;/n所述计算所述新词候选词与其子部分的语义相似度包括:/n计算所述新词候选词的词向量以及所述新词候选词的子部分的词向量;/n根据所述新词候选词的词向量以及所述新词候选词的子部分的词向量计算所述新词候选词与其子部分的语义相似度。/n
下载完整专利技术内容需要扣除积分,VIP会员可以免费下载。
该专利技术资料仅供研究查看技术是否侵权等信息,商用须获得专利权人授权。该专利全部权利属于上海智臻智能网络科技股份有限公司,未经上海智臻智能网络科技股份有限公司许可,擅自商用是侵权行为。如果您想购买此专利、获得商业授权和技术合作,请联系【客服】
本文链接:http://www.vipzhuanli.com/patent/201910727163.2/,转载请声明来源钻瓜专利网。