[发明专利]一种信息处理方法、装置、设备及存储介质

说明书

本公开涉及一种信息处理方法、装置、设备及存储介质。其中，信息处理方法包括：获取待处理文本；确定待处理文本与已存储文本之间的文本相似度；基于待处理文本的发布时间和已存储文本的发布时间，对文本相似度进行修正，得到修正后的文本相似度；在修正后的文本相似度大于或等于预设相似度阈值的情况下，将已存储文本作为待处理文本的相似文本。根据本公开实施例，可以提高重复信息的查找精度和效率且节约设备资源，以进一步提高重复信息的处理效果和效率，降低文本内容的重复性，进而使得用户快速且准确的从网络平台中查找感兴趣信息的需求，提高用户查看信息的体验且节约设备资源。

技术领域

本公开涉及信息处理技术领域，尤其涉及一种信息处理方法、装置、设备及存储介质。

背景技术

随着大数据时代的到来，网络平台逐渐逐趋向成熟，用户可以便捷的在网络平台上分享和查看感兴趣的信息。

为了避免在同一页面展示重复信息，网络平台需要对重复信息进行处理。然而，在相关技术中，网络平台不能快速准确地查找到重复信息，使得所展示内容的重复性依然较高，导致用户不能快速准确的从网络平台中查找感兴趣信息，影响用户的信息查看体验，且查找重复信息的过程占用较多的内存，浪费设备资源。

发明内容

为了解决上述技术问题或者至少部分地解决上述技术问题，本公开提供了一种信息处理方法、装置、设备及存储介质。

本公开提供了一种信息处理方法，该方法包括：

获取待处理文本；

确定待处理文本与已存储文本之间的文本相似度；

基于待处理文本的发布时间和已存储文本的发布时间，对文本相似度进行修正，得到修正后的文本相似度；

在修正后的文本相似度大于或等于预设相似度阈值的情况下，将已存储文本作为待处理文本的相似文本。

本公开提供了一种信息处理装置，该装置包括：

待处理文本获取模块，用于获取待处理文本；

文本相似度确定模块，用于确定待处理文本与已存储文本之间的文本相似度；

文本相似度修正模块，用于基于待处理文本的发布时间和已存储文本的发布时间，对文本相似度进行修正，得到修正后的文本相似度；

相似文本确定模块，用于在修正后的文本相似度大于或等于预设相似度阈值的情况下，将已存储文本作为待处理文本的相似文本。

本发明实施例还提供了一种信息处理设备，该设备包括：

一个或多个处理器；

存储装置，用于存储一个或多个程序，

当所述一个或多个程序被所述一个或多个处理器执行，使得所述一个或多个处理器实现本发明任意实施例所提供的信息处理方法。

本发明实施例还提供了一种计算机可读存储介质，其上存储有计算机程序，该计算机程序被处理器执行时实现本发明任意实施例所提供的信息处理方法。

本公开实施例提供的技术方案与现有技术相比具有如下优点：