[发明专利]一种数据迁移方法和装置

说明书

本发明公开了一种数据迁移方法和装置，涉及计算机技术领域。该方法的一具体实施方式包括：接收数据迁移任务，根据数据迁移任务，配置多个待迁移业务模块对应的参数文件；利用主控制进程读取子控制进程的并发数，并按照子控制进程的并发数，启动多个子控制进程；利用主控制进程和多个子控制进程，根据多个待迁移业务模块之间的依赖关系和每个待迁移业务模块对应的数据迁移信息，结合数据库信息，执行数据迁移。该实施方式能够实现并发执行多个待迁移业务模块的数据迁移，提高数据迁移的效率，减少人工干预，自动化程度高。

技术领域

本发明涉及计算机技术领域，尤其涉及一种数据迁移方法和装置。

背景技术

数据库的广泛应用和企业业务的不断发展，将一个数据库中的数据迁移到另一个数据库中已经成为一种常见的数据库操作。为了保证业务数据的连续性和可追溯性，企业需要将旧系统中存储的业务数据，按照新的业务逻辑进行加工整合后，存储于新系统中。

当前进行不同系统间的数据迁移时，通常是需要通过SQL(Structured QueryLanguage，结构化查询语言)脚本进行数据行级别的操作。但现有迁移方式面对复杂的业务甚至系统级别的数据迁移，不能并发处理，同时存在依赖关系的数据迁移脚本复杂，数据校验滞后，人工干预较多，且迁移过程中一旦出错，不容易追溯，存在自动化程度较低、效率低下的问题。

发明内容

有鉴于此，本发明实施例提供一种数据迁移方法和装置，能够实现并发执行多个待迁移业务模块的数据迁移，提高数据迁移的效率，减少人工干预，自动化程度高。

为实现上述目的，根据本发明实施例的一个方面，提供了一种数据迁移方法。

本发明实施例的一种数据迁移方法，包括：接收数据迁移任务，根据所述数据迁移任务，配置多个待迁移业务模块对应的参数文件，其中，所述参数文件包括：数据库信息、所述多个待迁移业务模块之间的依赖关系、每个所述待迁移业务模块对应的数据迁移信息、以及子控制进程的并发数；利用主控制进程读取所述子控制进程的并发数，并按照所述子控制进程的并发数，启动多个子控制进程；利用主控制进程和多个子控制进程，根据所述多个待迁移业务模块之间的依赖关系和每个所述待迁移业务模块对应的数据迁移信息，结合所述数据库信息，执行数据迁移。

可选地，所述利用主控制进程和多个子控制进程，根据所述多个待迁移业务模块之间的依赖关系和每个所述待迁移业务模块对应的数据迁移信息，结合所述数据库信息，执行数据迁移，包括：利用主控制进程，根据所述多个待迁移业务模块之间的依赖关系，确定所述多个待迁移业务模块对应的迁移顺序；利用主控制进程，按照所述多个待迁移业务模块对应的迁移顺序，将所述多个待迁移业务模块的模块唯一标识作为参数，传入多个子控制进程中；利用子控制进程，根据目标业务模块的模块唯一标识，查询所述目标业务模块对应的数据迁移信息，然后根据所述目标业务模块对应的数据迁移信息，结合所述数据库信息，对所述目标业务模块执行数据迁移；其中，所述目标业务模块为传入子控制进程的模块唯一标识对应的待迁移业务模块。

可选地，所述数据迁移信息包括：存储过程、子任务脚本和子任务脚本对应的数据校验脚本；所述数据库信息包括：源数据库、目的数据库、以及源数据库与目的数据库之间的连接信息；以及，所述根据所述目标业务模块对应的数据迁移信息，结合所述数据库信息，对所述目标业务模块执行数据迁移，包括：调用所述目标业务模块对应的存储过程，根据所述源数据库与目的数据库之间的连接信息，执行所述目标业务模块包含的子任务脚本，以便将所述目标业务模块的数据从所述源数据库迁移至所述目的数据库；在将所述目标业务模块包含的子任务脚本执行完成后，执行所述目标业务模块包含的子任务脚本对应的数据校验脚本；若校验通过，则标记所述目标业务模块的数据迁移状态为已迁移完成，若校验不通过，则标记所述目标业务模块的数据迁移状态为未迁移完成。