[发明专利]改写词生成模型的训练方法及装置

说明书

本公开的实施例提供了一种改写词生成模型的训练方法及装置。所述方法包括：获取初始改写词生成模型；将搜索关键词输入至所述初始改写词生成模型，并获取由所述初始改写词生成模型输出的所述搜索关键词对应的改写关键词；获取所述搜索关键词与所述改写关键词之间的偏差分值；根据所述偏差分值、所述搜索关键词和所述改写关键词对所述初始改写词模型进行训练，得到目标改写词生成模型。本公开的实施例可以提高查询改写的准确率和覆盖率。

技术领域

本公开的实施例涉及模型训练技术领域，尤其涉及一种改写词生成模型的训练方法及装置。

背景技术

查询改写(又称查询扩展)是在搜索引擎中对用户搜索的查询词进行改写，提升搜索引擎召回结果的一种方法。在美团点评搜索引擎中，通常一个商户或者菜品会有不同的多种表达方式；例如“火锅”也称为“涮锅”。有时不同的词语表述相同的用户意图；例如“婚纱摄影”和“婚纱照”，“配眼镜”和“眼镜店”等。

搜索引擎的查询改写可以看做是针对搜索引擎的召回优化，在不改变用户意图的情况下，尽可能多的召回满足用户意图的搜索结果，提升用户的搜索体验。

目前，常用的查询改写方法为：数据挖掘的方法，其是通过用户的行为进行挖掘，通常行为比较密集的热门查询关键词上挖掘的准确率比较高，但是用户行为稀疏的长尾流量上准确率比较低。在使用中通常使用准确率比较高的挖掘数据，所以在长尾流量上通常覆盖较低，进而导致查询改写的准确率和覆盖率较低。

发明内容

本公开的实施例提供一种改写词生成模型的训练方法及装置，用以提升查询改写的准确率和覆盖率。

根据本公开的实施例的第一方面，提供了一种改写词生成模型的训练方法，包括：

获取初始改写词生成模型；

将搜索关键词输入至所述初始改写词生成模型，并获取由所述初始改写词生成模型输出的所述搜索关键词对应的改写关键词；

获取所述搜索关键词与所述改写关键词之间的偏差分值；

根据所述偏差分值、所述搜索关键词和所述改写关键词对所述初始改写词模型进行训练，得到目标改写词生成模型。

可选地，所述获取初始改写词生成模型，包括：

根据搜索日志，获取查询关键词集合；

基于所述查询关键词集合中的查询关键词，对待训练改写词生成模型进行训练，得到所述初始改写词生成模型。

可选地，所述获取所述搜索关键词与所述改写关键词之间的偏差分值，包括：

获取所述搜索关键词与所述改写关键词之间的曝光交叉度和点击交叉度；

获取所述搜索关键词与所述改写关键词之间的语义相似度；

根据所述曝光交叉度、所述点击交叉度和所述语义相似度，确定所述搜索关键词与所述改写关键词之间的偏差分值。

可选地，所述获取所述搜索关键词与所述改写关键词之间的曝光交叉度和点击交叉度，包括：

获取所述搜索关键词对应的第一曝光结果和第一点击结果，及所述改写关键词对应的第二曝光结果和第二点击结果；

根据所述第一曝光结果和所述第二曝光结果，确定所述搜索关键词与所述改写关键词之间的曝光交叉度；

根据所述第一点击结果和所述第二点击结果，确定所述搜索关键词与所述改写关键词之间的点击交叉度。

可选地，所述获取所述搜索关键词与所述改写关键词之间的语义相似度，包括：

将所述搜索关键词和所述改写关键词输入至语义判别模型；