[发明专利]不停机数据迁移方法及装置

说明书

本发明提供一种不停机数据迁移方法及装置，包括将第一数据系统的业务表数据存储到数据存储仓库中，获取所述数据存储仓库的离线表数据；配置第二数据系统的配置信息；根据所述离线表数据以及所述业务表数据，将所述待迁移数据从所述数据存储仓库中迁移到所述第二数据系统，并且获取所述待迁移数据迁移过程中所产生的脏数据；将所述第一数据系统中的业务数据回灌到所述第二数据系统中，并清理所述脏数据。本公开实施例的方法能够克服现有技术停机进行数据迁移的问题，并且能够降低数据迁移停业务带来的损失，降低夜间人员值班的人力成本，实现对客无感知，增强数据迁移的灵活，提高数据迁移的效率。

技术领域

本发明涉及数据迁移技术领域，尤其涉及一种不停机数据迁移方法及装置。

背景技术

在当前互联网的公司里，业务都是快速迭代、快速上线。当系统无法承载现有的业务的发展，往往会选择重新设计现有的系统，新老系统业务迁移不可避免涉及到数据的迁移、接口迁移。

在迁移过程中，现有技术大部分会选择在夜间停机停业务进行迁移。停机迁移的方案，涉及的系统和部门比较多，人力成本高，对线上业务特别是核心业务影响比较大，而且影响用户体验。

发明内容

本发明实施例提供一种不停机数据迁移方法及装置，能够克服现有技术进行数据迁移时，停机停业务造成高昂的人力成本以及对核心业务造成较大影响的问题。

本公开实施例的第一方面，提供一种不停机数据迁移方法，包括：

将第一数据系统的业务表数据存储到数据存储仓库中，获取所述数据存储仓库的离线表数据，其中，所述第一数据系统配置为待迁移数据所在的业务系统，所述待迁移数据包括用户编码信息，所述业务表数据用于指示用户在所述第一数据系统的交易业务的属性数据，所述离线表数据用于指示离线状态下交易业务的属性数据；

配置第二数据系统的配置信息，所述第二数据系统配置为所述待迁移数据将要迁入的数据系统；

根据所述离线表数据以及所述业务表数据，将所述待迁移数据从所述数据存储仓库中迁移到所述第二数据系统，并且获取所述待迁移数据迁移过程中所产生的脏数据；

将所述第一数据系统中的业务数据回灌到所述第二数据系统中，并清理所述脏数据，其中，所述业务数据用于指示用户在所述第一数据系统的交易业务。

可选地，所述获取所述待迁移数据迁移过程中产生的脏数据的方法包括：

在所述待迁移数据迁移之前，开启所述业务系统的交易记录开关，所述交易记录开关用于开始或者结束记录在数据迁移过程中的交易情况；

在所述待迁移数据迁移到所述第二数据系统后，关闭所述交易记录开关，将所述待迁移数据迁移过程中变动的用户编码信息作为脏数据。

可选地，所述清理所述脏数据包括：

开启所述业务系统的多线程并发处理功能，获取所述脏数据所包含的用户编码信息；

基于所述第二数据系统的数据清除接口，将迁移期间存在交易客户对应的用户编码信息从所述第二数据系统中清除。

可选地，所述方法还包括：

在所述第一数据系统中设定系统代理功能，所述系统代理功能设定为：

若所述待迁移数据对应的用户编码信息未被迁移至所述第二数据系统，则获取所述用户编码信息对应的用户在所述第一数据系统中所产生的业务数据；

若所述待迁移数据对应的用户编码信息已经被迁移至所述第二数据系统中，则将所述用户编码信息对应的用户在所述第一数据系统中所产生的业务数据同步至所述第二数据系统中。

可选地，所述配置第二数据系统的配置信息包括：