[发明专利]数据同步方法、装置、电子设备及存储介质

说明书

本发明的实施例提供了一种数据同步方法、装置、电子设备及存储介质，涉及大数据技术领域。该方法包括：监听对第一Redis数据库的写操作请求，并获取该写操作请求中的待写入数据；生成待写入数据的第一键值，基于第一键值将待写入数据写入第一Redis数据库；通过TCP请求将待写入数据发送至第二Redis数据库，并以第一键值作为该TCP请求的唯一标识；以该唯一标识作为第二键值将待写入数据写入第二Redis数据库。本发明实施例的技术方案能够防止由于网络延迟导致重复写入的情况，便于对两个数据库中不一致的数据进行处理。

技术领域

本发明涉及大数据技术领域，具体而言，涉及一种数据同步方法、数据同步装置、电子设备以及计算机可读存储介质。

背景技术

随着大数据技术的发展，Redis数据库的应用也越来越广泛。Redis数据库是开源的、支持网络交互的、可基于内存也可持久化的键值对(Key-Value)数据库。

目前，为了对Redis数据库进行容灾备份，需要采用双活容灾的方案部署Redis数据库。Redis双活方案设计的核心是数据同步，Redis本身虽然具有主从复制功能，但是该主从复制功能在同步过程中不仅容易产生数据重复写入的问题，而且容易产生数据不一致的问题。

需要说明的是，在上述背景技术部分公开的信息仅用于加强对本发明背景的理解，因此可以包括不构成对本领域普通技术人员已知的现有技术的信息。

发明内容

本发明实施例的目的在于提供一种数据同步方法、数据同步装置、电子设备以及计算机可读存储介质，进而至少在一定程度上克服由于相关技术的限制和缺陷而导致的一个或者多个问题。

根据本发明实施例的第一方面，提供了一种数据同步方法，包括：监听对第一Redis数据库的写操作请求，并获取所述写操作请求中的待写入数据；生成所述待写入数据的第一键值，基于所述第一键值将所述待写入数据写入所述第一Redis数据库；通过传输控制协议请求将所述待写入数据发送至第二Redis数据库，并以所述第一键值作为所述传输控制协议请求的唯一标识；以所述唯一标识作为第二键值将所述待写入数据写入所述第二Redis数据库。

在本发明的一些示例性实施例中，以所述唯一标识作为第二键值将所述待写入数据写入所述第二Redis数据库，包括：在所述第二Redis数据库处监听到所述传输控制协议请求之后，从所述传输控制协议请求中提取所述唯一标识以及所述待写入数据；判断所述第二Redis数据库中是否存在与所述唯一标识对应的键值；若判定不存在，则以所述唯一标识作为第二键值将所述待写入数据写入所述第二Redis数据库中；若判定存在，则不再将所述待写入数据写入所述第二Redis数据库。

在本发明的一些示例性实施例中，所述数据同步方法还包括：在将所述待写入数据写入所述第二Redis数据库中时，判断所述第二Redis数据库中是否存在所述唯一标识；若判定存在时，通过所述唯一标识获取所述待写入数据在所述第二Redis数据库中的写入次数；基于所述写入次数判断所述待写入数据是否已经写入成功；在判定写入成功时，不再进行写入操作。

在本发明的一些示例性实施例中，所述数据同步方法还包括：通过时间戳字段分别记录所述待写入数据写入所述第一Redis数据库和所述第二Redis数据库的写入时间；判断所述第一Redis数据库与所述第二Redis数据库中相同键值对应的数据的写入时间是否一致；若判定不一致，则基于所述写入时间对所述写入时间不一致的数据在所述第一Redis数据库和所述第二Redis数据库之间进行同步。

在本发明的一些示例性实施例中，生成所述待写入数据的第一键值，包括：基于所述待写入数据以及监听到所述写操作请求的时间生成所述待写入数据的第一键值。

在本发明的一些示例性实施例中，所述数据同步方法还包括：监听对所述第一Redis数据库的读操作请求；在所述读操作请求读取失败时，根据预定路由规则从所述第二Redis数据库读取数据。