[发明专利]数据泛化方法、装置、设备和介质

说明书

本发明实施例公开了一种数据泛化方法、装置、设备和介质，涉及数据处理技术领域。该方法包括：根据各检索项中的词语，对包括待泛化的目标检索项和历史检索项的检索项集进行分组；根据分组结果，从历史检索项中确定所述目标检索项的泛化检索项。本发明实施例提供了一种数据泛化方法、装置、设备和介质，实现了对待泛化的检索项进行合理和广泛的泛化。

技术领域

本发明实施例涉及数据处理技术领域，尤其涉及一种数据泛化方法、装置、设备和介质。

背景技术

表述同一语义的检索项(query)往往具有不止一种表述形式，如何尽可能多的挖掘这些表述形式就是对query的泛化。

当前对query的泛化主要是基于同义词进行关键词的替换。

然而，尽管使用关键词替换能够解决一部分的泛化，但是这些泛化还不够全面。毕竟关键词替换可以解决的问题的是有限的，但是人总可能想出一些意想不到的提问方式。

此外，关键词替换在特定主语情况下也可能出现错误。比如在绝大多数情况下“谁”和“哪个人”是等义的。但是比如对于“2018足球世界杯冠军是谁”，泛化为“2018足球世界杯冠军是哪个人”显然是不合适的。

发明内容

本发明实施例提供一种数据泛化方法、装置、设备和介质，以实现对待泛化的检索项进行合理和广泛的泛化。

第一方面，本发明实施例提供了一种数据泛化方法，该方法包括：

根据各检索项中的词语，对包括待泛化的目标检索项和历史检索项的检索项集进行分组；

根据分组结果，从历史检索项中确定所述目标检索项的泛化检索项。

第二方面，本发明实施例还提供了一种数据泛化装置，该装置包括：

分组模块，用于根据各检索项中的词语，对包括待泛化的目标检索项和历史检索项的检索项集进行分组；

泛化模块，用于根据分组结果，从历史检索项中确定所述目标检索项的泛化检索项。

第三方面，本发明实施例还提供了一种设备，所述设备包括：

一个或多个处理器；

存储装置，用于存储一个或多个程序，

当所述一个或多个程序被所述一个或多个处理器执行，使得所述一个或多个处理器实现如本发明实施例中任一所述的数据泛化方法。

第四方面，本发明实施例还提供了一种计算机可读存储介质，其上存储有计算机程序，该程序被处理器执行时实现如本发明实施例中任一所述的数据泛化方法。

本发明实施例通过根据各检索项中的词语，对包括待泛化的目标检索项和历史检索项的检索项集进行分组，从而实现对目标检索项的广泛泛化。通过根据分组结果，从历史检索项中确定所述目标检索项的泛化检索项，从而使得泛化检索项符合用户提问逻辑，避免直接替换导致泛化的检索项不合理的情况。

附图说明

图1为本发明实施例一提供的一种数据泛化方法的流程图；

图2是本发明实施例二提供的一种数据泛化方法的流程图；

图3是本发明实施例三提供的一种数据泛化方法的流程图；

图4是本发明实施例四提供的一种数据泛化方法的流程图；

图5是本发明实施例四提供的一种数据泛化方法的另一种流程描述示意图；

图6是本发明实施例五提供的一种数据泛化装置的结构示意图；

图7为本发明实施例六提供的一种设备的结构示意图。

具体实施方式