[发明专利]词向量生成方法、装置及电子设备

权利要求书

1.一种词向量生成方法，其特征在于，包括：

获取待处理语句，并获取所述待处理语句中的目标词；

获取所述目标词的上下文信息；

根据预设的分词与词向量的映射关系，确定所述目标词对应的上下文无关词向量；

根据预设的字符与字向量的映射关系，确定所述上下文信息对应的上下文语义向量；以及

根据所述上下文无关词向量与所述上下文语义向量，生成所述目标词对应的目标词向量；

还包括：

利用预设的语言识别模型，对预设的词典中包括的每个字符进行识别处理，确定所述每个字符对应的字向量，以生成所述预设的字符与字向量的映射关系；

利用所述预设的语言识别模型，对所述预设的词典中包括的每个分词进行识别处理，确定所述每个分词对应的词向量，以生成所述预设的分词与词向量的映射关系；所述获取所述目标词的上下文信息，包括：

根据所述目标词在所述待处理语句中的位置及上下文窗口长度，确定所述待处理语句中处于所述上下文窗口之中的多个字符，其中，处于所述上下文窗口之中的多个字符构成所述目标词的上下文信息；

所述确定所述上下文信息对应的上下文语义向量，包括：

根据所述预设的字符与字向量的映射关系，确定处于所述上下文窗口之中的多个字符分别对应的字向量；

根据所述多个字符分别对应的字向量，确定所述上下文语义向量。

2.如权利要求1所述的方法，其特征在于，所述确定所述每个分词对应的词向量，包括：

在第一分词之前添加句首标识字符，以及在所述第一分词之后分别添加第一句尾标识字符和第二句尾标识字符，以生成所述第一分词对应的待识别语句；

利用所述预设的语言识别模型，对所述第一分词对应的待识别语句进行识别处理，确定所述第一分词对应的词向量。

3.如权利要求2所述的方法，其特征在于，所述确定所述第一分词对应的词向量，包括：

确定所述第一分词中每个字符对应的字向量及所述首标识字符对应的第一向量；

对所述第一分词中每个字符对应的字向量进行最大池化处理，生成所述第一分词对应的第二向量；

对所述第一分词中每个字符对应的字向量进行均值池化处理，生成所述第一分词对应的第三向量；

根据所述第一向量、所述第二向量及所述第三向量，确定所述第一分词对应的词向量。

4.如权利要求1-3任一所述的方法，其特征在于，所述根据所述上下文无关词向量与所述上下文语义向量，生成所述目标词对应的目标词向量，包括：

将所述上下文无关词向量与所述上下文语义向量相加，以生成所述目标词对应的目标词向量。

5.一种词向量生成装置，其特征在于，包括：

第一获取模块，用于获取待处理语句，并获取所述待处理语句中的目标词；

第二获取模块，用于获取所述目标词的上下文信息；

第一确定模块，用于根据预设的分词与词向量的映射关系，确定所述目标词对应的上下文无关词向量；

第二确定模块，用于根据预设的字符与字向量的映射关系，确定所述上下文信息对应的上下文语义向量；以及

生成模块，用于根据所述上下文无关词向量与所述上下文语义向量，生成所述目标词对应的目标词向量；

还包括：

第三确定模块，用于利用预设的语言识别模型，对预设的词典中包括的每个字符进行识别处理，确定所述每个字符对应的字向量，以生成所述预设的字符与字向量的映射关系；

第四确定模块，用于利用所述预设的语言识别模型，对所述预设的词典中包括的每个分词进行识别处理，确定所述每个分词对应的词向量，以生成所述预设的分词与词向量的映射关系；

所述第二获取模块，具体用于：

根据所述目标词在所述待处理语句中的位置及上下文窗口长度，确定所述待处理语句中处于所述上下文窗口之中的多个字符，其中，处于所述上下文窗口之中的多个字符构成所述目标词的上下文信息；

所述第二确定模块，具体用于：

根据所述预设的字符与字向量的映射关系，确定处于所述上下文窗口之中的多个字符分别对应的字向量；

根据所述多个字符分别对应的字向量，确定所述上下文语义向量。