[发明专利]一种数据处理方法、装置、设备和存储介质

说明书

本发明公开了一种数据处理方法、装置、设备和存储介质。该方法包括：确定用户操作数据；从所述用户操作数据中确定键和值；根据所述用户操作数据的键从两个以上的缓存空间中确定目标空间；在所述目标空间中，按照预设的处理目标将所述用户操作数据的值写入所述用户操作数据的键对应的候选集合；若符合预设的处理条件，则按照所述处理目标对所述候选集合中的用户操作数据的值进行处理。通过该方法可以解决每一条数据都会实时进行两次网络交互造成的时间成本大，不仅容易造成网络拥塞，还会导致不能实时获得数据交互的问题。

技术领域

本发明实施例涉及数据统计技术，尤其涉及一种数据处理方法、装置、设备和存储介质。

背景技术

随着计算机技术的发展，越来越多的网站选择使用Redis来布局信息，Redis作为一个高性能的键值对(key-value)数据库，为数据统计提供了很多便利。

在现有技术中，网站每收到一条数据都需要与数据库中全部数据进行综合处理，以获得用户需求的数据。同时，每一次与数据库中全部数据进行综合处理，都需要两次网络交互，当数据量很大时，网络交互的时间成本会很大，不仅容易造成网络拥塞，还会导致不能实时获得数据交互的问题。

发明内容

本发明提供一种数据处理方法、装置、设备和存储介质，以解决网站每收到一条数据都需要与数据库中全部数据进行综合处理，以获得用户需求的数据的问题。

第一方面，本发明实施例提供了一种数据处理方法，包括：

确定用户操作数据；

从所述用户操作数据中确定键和值；

根据所述用户操作数据的键从两个以上的缓存空间中确定目标空间；

在所述目标空间中，按照预设的处理目标将所述用户操作数据的值写入所述用户操作数据的键对应的候选集合；

若符合预设的处理条件，则按照所述处理目标对所述候选集合中的用户操作数据的值进行处理。

在此基础上，每个缓存空间具有空间编号；

所述根据所述用户操作数据的键从两个以上的缓存空间中确定目标空间，包括：

对所述用户操作数据的键进行处理，获得数据编号；

当所述空间编号与所述数据编号匹配时，将与所述数据编号对应的缓存空间确定为目标空间。

在此基础上，所述处理目标包括去重处理；

所述在所述目标空间中，按照预设的处理目标将所述用户操作数据的值写入所述用户操作数据的键对应的候选集合，包括：

在所述目标空间中，确定所述用户操作数据的键对应的候选集合；

判断所述候选集合中的值与所述用户操作数据的值是否相同；

若是，则忽略所述用户操作数据的值；

若否，则将所述用户操作数据的值写入所述候选集合。

在此基础上，每个所述缓存空间在数据库中分配有存储分区；

所述按照所述处理目标对所述候选集合中的用户操作数据的值进行处理，包括：

从所述目标空间对应的存储分区中查找所述目标空间中的键对应的目标集合；

判断所述目标集合的值中与所述候选集合中的值是否相同；

若是，则忽略所述候选集合中的值，以确定所述目标集合中值的个数；

若否，则将所述候选集合中的值写入所述目标集合，以确定所述目标集合中值的个数。