[发明专利]商品实体识别方法、装置、设备和存储介质

权利要求书

1.一种商品实体识别方法，所述方法包括：

基于NER模型包含的编码器，对包含与目标商品对应的命名实体的待识别字符串，以及与所述目标商品对应的辅助字符串进行编码处理，以确定与所述待识别字符串对应的语义向量序列；

从所述NER模型包含的多个解码器中确定出与所述目标商品对应的目标解码器，并基于所述目标解码器，对所述语义向量序列进行解码处理，以确定与所述待识别字符串对应的命名实体类型序列；

根据所述命名实体类型序列，从所述待识别字符串中识别出与所述目标商品对应的命名实体。

2.根据权利要求1所述的方法，所述基于NER模型包含的编码器，对包含与目标商品对应的命名实体的待识别字符串，以及与所述目标商品对应的辅助字符串进行编码处理，以确定与所述待识别字符串对应的语义向量序列，包括：

基于NER模型包含的编码器，对包含与目标商品对应的命名实体的待识别字符串进行编码处理，得到第一向量序列，并基于所述编码器，对与所述目标商品对应的辅助字符串进行编码处理，得到第二向量序列；

对所述第一向量序列和所述第二向量序列进行拼接处理，并基于所述NER模型包含的线性层，对拼接处理后的向量序列进行线性交互处理；

将线性交互处理后的向量序列确定为与所述待识别字符串对应的语义向量序列。

3.根据权利要求2所述的方法，所述辅助字符串包括商品类目描述文本。

4.根据权利要求1所述的方法，所述基于NER模型包含的编码器，对包含与目标商品对应的命名实体的待识别字符串，以及与所述目标商品对应的辅助字符串进行编码处理，以确定与所述待识别字符串对应的语义向量序列，包括：

基于包含与目标商品对应的命名实体的待识别字符串，以及与所述目标商品对应的辅助字符串，构建字符串对；

基于NER模型包含的编码器，对所述字符串对进行编码处理，得到与所述字符串对对应的语义向量序列；

从与所述字符串对对应的语义向量序列中提取出与所述待识别字符串对应的语义向量序列。

5.根据权利要求4所述的方法，所述方法还包括：

针对所述待识别字符串进行正向最大匹配，以从所述待识别字符串中划分出与商品品牌对应的第一子字符串，以及与商品名称对应的第二子字符串；

基于所述第一子字符串及其标签字符串，以及所述第二子字符串及其标签字符串，构建所述辅助字符串；其中，与所述第一子字符串对应的标签字符串为与商品品牌对应的标签字符串，与所述第二子字符串对应的标签字符串为与商品名称对应的标签字符串。

6.根据权利要求1所述的方法，采用以下步骤对所述NER模型进行训练：

基于第一字符串样本集，针对所述NER模型包含的所述目标解码器进行有监督训练；其中，所述第一字符串样本集中的各个第一样本字符串被标注了强标签；所述强标签包括与所述第一样本字符串对应的命名实体类型序列；

基于包含训练完成的所述目标解码器的所述NER模型，针对第二字符串样本集中的各个第二字符串样本进行命名实体识别，以确定与所述第二字符串样本对应的命名实体类型序列，并根据所述命名实体类型序列，从所述第二字符串样本中识别出命名实体；

针对所述第二字符串样本集中的各个第二字符串样本进行正向最大匹配，以从所述第二字符串样本中划分出子字符串；

将所述子字符串与所述命名实体进行匹配，并根据匹配结果，为所述第二字符串样本集中的各个第二字符串样本标注弱标签；其中，所述弱标签包括与所述第二字符串样本对应的命名实体类型序列；

基于所述第一字符串样本集，以及标注后的所述第二字符串样本集，重新针对所述NER模型包含的所述目标解码器进行有监督训练。