[发明专利]一种基于高斯分布的词向量生成方法有效
申请号: | 201810331000.8 | 申请日: | 2018-04-13 |
公开(公告)号: | CN108733647B | 公开(公告)日: | 2022-03-25 |
发明(设计)人: | 沈鸿;曹渝 | 申请(专利权)人: | 中山大学 |
主分类号: | G06F40/30 | 分类号: | G06F40/30;G06K9/62 |
代理公司: | 广东广信君达律师事务所 44329 | 代理人: | 杨晓松 |
地址: | 510275 *** | 国省代码: | 广东;44 |
权利要求书: | 查看更多 | 说明书: | 查看更多 |
摘要: | 本发明公开了一种基于高斯分布的词向量生成方法,首先对语料库进行预处理;其次使用标点符号对语料库划分上下文;然后结合局部和全局信息推断词义,确定词与词义的映射关系;最后通过优化目标函数获得词向量。本发明技术方案的创新点和有益效果在于:1、基于高斯分布来表示词,避免传统词向量的点估计特性,能为词向量带来概率质量,词义蕴含、包含关系等更为丰富的信息。2、使用多个高斯分布来表示词,能够应对自然语言中一词多义的语言特性。3、基于Hellinger距离定义高斯分布之间的相似性,将参数更新和词义判别结合起来,能够自适应地推断词义的数量,解决了现有技术模型的假定词义数量固定的问题。 | ||
搜索关键词: | 一种 基于 分布 向量 生成 方法 | ||
【主权项】:
1.一种基于高斯分布的词向量生成方法,其特征在于:首先对语料库进行预处理;其次利用标点符号将语料库划分为上下文;然后结合局部和全局信息推断词义,确定词与词义的映射关系;最后通过优化目标函数获得词向量。
下载完整专利技术内容需要扣除积分,VIP会员可以免费下载。
该专利技术资料仅供研究查看技术是否侵权等信息,商用须获得专利权人授权。该专利全部权利属于中山大学,未经中山大学许可,擅自商用是侵权行为。如果您想购买此专利、获得商业授权和技术合作,请联系【客服】
本文链接:http://www.vipzhuanli.com/patent/201810331000.8/,转载请声明来源钻瓜专利网。
- 上一篇:候选词评估方法、装置、计算机设备和存储介质
- 下一篇:平滑处理方法和系统