[发明专利]语言模型的构建方法和装置

权利要求书

1.一种语言模型的构建方法，其特征在于，包括：

确定建模单元；

获取所述建模单元的词向量，以及除所述词向量之外的其他特征向量；

根据所述词向量和所述其他特征向量，生成所述建模单元对应的语言模型。

2.根据权利要求1所述的方法，其特征在于，当所述建模单元为多个时，所述方法还包括：

采用所述多个语言模型中的一个或者至少两个计算得到语言模型得分。

3.根据权利要求2所述的方法，其特征在于，当采用至少两个语言模型计算得到语言模型得分时，所述语言模型得分是根据所述至少两个语言模型中的每个语言模型对应的得分进行插值运算后得到的。

4.根据权利要求1-3任一项所述的方法，其特征在于，当所述语言模型是黏着语语言模型时，所述建模单元和对应的其他特征向量包括：

当所述建模单元是整词时，所述其他特征向量是所述整词包括的词干对应的词干词性向量；或者，

当所述建模单元是子词时，所述其他特征向量是所述子词对应的子词属性向量；或者，

当所述建模单元是词干时，所述其他特征向量是所述词干对应的词干词性向量。

5.根据权利要求4所述的方法，其特征在于，获取所述其他特征向量，包括：

根据对词干的词性标注信息和/或对词缀的构型属性标注信息，获取所述其他特征向量。

6.根据权利要求1-3任一项所述的方法，其特征在于，所述根据所述词向量和所述其他特征向量，生成所述建模单元对应的语言模型，包括：

根据所述词向量和所述其他特征向量，通过如下项中的任一项的训练方式，生成对应的语言模型：

RNN、CNN、DNN、N-gram。

7.一种语言模型的构建装置，其特征在于，包括：

确定模块，用于确定建模单元；

获取模块，用于获取所述建模单元的词向量，以及除所述词向量之外的其他特征向量；

生成模块，用于根据所述词向量和所述其他特征向量，生成所述建模单元对应的语言模型。

8.根据权利要求7所述的装置，其特征在于，当所述建模单元为多个时，所述装置还包括：

计算模块，用于采用所述多个语言模型中的一个或者至少两个计算得到语言模型得分。

9.根据权利要求8所述的装置，其特征在于，当采用至少两个语言模型计算得到语言模型得分时，所述计算模块得到的所述语言模型得分是根据所述至少两个语言模型中的每个语言模型对应的得分进行插值运算后得到的。

10.根据权利要求7-9任一项所述的装置，其特征在于，当所述语言模型是黏着语语言模型时，所述建模单元和对应的其他特征向量包括：

当所述建模单元是整词时，所述其他特征向量是所述整词包括的词干对应的词干词性向量；或者，

当所述建模单元是子词时，所述其他特征向量是所述子词对应的子词属性向量；或者，

当所述建模单元是词干时，所述其他特征向量是所述词干对应的词干词性向量。

11.根据权利要求10所述的装置，其特征在于，所述获取模块用于获取所述其他特征向量，包括：

根据对词干的词性标注信息和/或对词缀的构型属性标注信息，获取所述其他特征向量。

12.根据权利要求7-9任一项所述的装置，其特征在于，所述生成模块具体用于：

根据所述词向量和所述其他特征向量，通过如下项中的任一项的训练方式，生成对应的语言模型：

RNN、CNN、DNN、N-gram。