[发明专利]一种数据处理方法、装置、电子设备和存储介质

说明书

本发明实施例提供了一种数据处理方法、装置、电子设备和存储介质，所述方法包括：调用所述Redis存储系统的主从同步接口，获取针对所述键值对数据的操作指令；统计根据所述操作指令发生更改后的所述数据的数据大小；将所述数据标识和所述数据大小存储为目标键值对数据；将所述目标键值对数据中不满足预设条件的所述数据大小对应的数据标识，确定为异常数据标识；将所述主数据库中与所述异常数据标识对应的键值对数据确定为异常键值对数据。可实时地从主数据库中查找出异常数据，避免问题扩大化，提高主数据库运行的稳定性。

技术领域

本发明实施例涉及数据处理技术领域，特别是涉及一种数据处理方法、一种数据处理装置、电子设备和存储介质。

背景技术

Redis(Remote Dictionary Server)，即远程字典服务，是一个开源的、支持网络、可基于内存亦可持久化的日志型、Key(键)-Value(值)数据库，Key和Value之间是映射关系，Redis具有数据类型丰富和高性能等优点。

在实际使用中，如果Redis中存在数据容量很大的Value，当通过Key去获取该数据容量很大的Value时，会严重影响Redis的性能，因此，需要将数据容量过大的Value对应的Key找出来并进行优化处理。目前常用的方法是，采用离线分析的方式扫描Redis的全部数据表，查找出数据容量过大的Value对应的Key，然而这种方式的查找速度很慢，无法及时发现异常数据，可能导致Redis的性能进一步下降。

发明内容

本发明实施例是提供一种数据处理方法，以解决现有技术中Redis存储系统查找异常数据速度慢的问题。

相应的，本发明实施例还提供了一种数据处理装置，用以保证上述方法的实现及应用。

为了解决上述问题，本发明实施例公开了一种数据处理方法，其特征在于，应用于Redis存储系统，所述Redis存储系统中包括主数据库，所述主数据库中存储有键值对数据，所述键值对数据包括数据标识和数据，所述方法包括：

调用所述Redis存储系统的主从同步接口，获取针对所述键值对数据的操作指令；

统计根据所述操作指令发生更改后的所述数据的数据大小；

将所述数据标识和所述数据大小存储为目标键值对数据；

将所述目标键值对数据中不满足预设条件的所述数据大小对应的数据标识，确定为异常数据标识；

将所述主数据库中与所述异常数据标识对应的键值对数据确定为异常键值对数据。

可选地，所述将所述数据标识和所述数据大小存储为所述目标键值对数据，包括：

判断所述目标键值对数据中是否存在所述数据标识；

若是，则根据所述操作指令，将所述数据标识和所述数据大小存储为目标键值对数据；若否，则将所述数据标识和所述数据大小转换为新增键值对数据，将所述新增键值对数据存储在所述目标键值对数据中。

可选地，所述根据所述操作指令，将所述数据标识和所述数据大小存储为目标键值对数据，包括：

若所述操作指令为修改指令，则从所述目标键值对数据中获取与所述数据标识对应的原始数据大小，将所述原始数据大小修改为所述数据大小；

若所述操作指令为删除指令，则删除所述目标键值对数据中与所述数据标识对应的键值对数据。

可选地，所述将所述数据标识和所述数据大小转换为新增键值对数据，包括：

获取所述主数据库的主数据库标识；

将所述主数据库标识和所述数据标识组合得到指定数据标识；

将所述数据标识转换为所述指定数据标识；