[发明专利]数据迁移方法、装置、存储介质及电子设备

说明书

本申请公开了一种数据迁移方法、装置、存储介质及电子设备，涉及计算机技术领域，该方法包括：从预定存储路径中读取源迁移数据文件，源迁移数据文件为将源数据库中源数据库表导出所得到并存储至预定存储路径的；根据源数据库与目标数据库中的差异进行转换条件配置处理，得到数据转换条件；根据数据转换条件将源迁移数据文件进行转换处理，得到待迁移数据文件；将待迁移数据文件迁移至目标数据库，并从目标数据库中提取目标数据监控信息以及从源数据库中提取源数据监控信息；根据目标数据监控信息及源数据监控信息生成数据迁移监控日志。本申请可以有效提升数据迁移效率且降低数据迁移错误率，提升数据迁移可靠性。

技术领域

本申请涉及计算机技术领域，具体涉及一种数据迁移方法、装置、存储介质及电子设备。

背景技术

数据迁移即将数据在不同数据库之间进行迁移的工作，以金融系统为例的各类系统中通常存在大量数据需要进行数据迁移。

目前，数据迁移的方式，通常是传统的人工数据迁移或者基于固定配置进行转移，面对大量表和数据以及数据库表种类多时，目前重复性、固定式的迁移操作不仅耗费时间，且数据迁移的出错概率高。

因此，目前存在数据迁移效率较低且错误率较高的问题，导致数据迁移可靠性较差的问题。

发明内容

本申请实施例提供一种方案，可以有效提升数据迁移效率且降低数据迁移错误率，提升数据迁移可靠性。

为解决上述技术问题，本申请实施例提供以下技术方案：

根据本申请的一个实施例，一种数据迁移方法，所述方法包括：

从预定存储路径中读取源迁移数据文件，所述源迁移数据文件为将源数据库中源数据库表导出所得到并存储至所述预定存储路径的；

根据所述源数据库与目标数据库中的差异进行转换条件配置处理，得到数据转换条件；

根据所述数据转换条件将所述源迁移数据文件进行转换处理，得到待迁移数据文件；

将所述待迁移数据文件迁移至所述目标数据库，并从所述目标数据库中提取目标数据监控信息以及从所述源数据库中提取源数据监控信息；

根据所述目标数据监控信息及所述源数据监控信息生成数据迁移监控日志，所述数据迁移监控日志用于监控数据迁移所存在的迁移问题。

在本申请的一些实施例中，所述数据转换条件包括数据用户权限及数据转换方式；所述根据所述数据转换条件将所述源迁移数据文件进行转换处理，得到待迁移数据文件，包括：

根据所述数据转换方式对所述源迁移数据文件进行转换处理，得到预迁移数据文件；

根据所述数据用户权限对所述预迁移数据文件设定用户权限，得到所述待迁移数据文件。

在本申请的一些实施例中，所述从预定存储路径中读取源迁移数据文件，包括：

根据所述待迁移数据文件进行线程数配置，得到线程数目；

根据所述线程数目启动读取线程；

基于所述读取线程从预定存储路径中读取源迁移数据文件。

在本申请的一些实施例中，所述将所述待迁移数据文件迁移至所述目标数据库，包括：

在所述目标数据库中创建所述待迁移数据文件对应的目标临时表及所述目标临时表对应的压缩存储格式目标表；

将所述待迁移数据文件复制到所述目标临时表；

将所述目标临时表中数据插入到所述压缩存储格式目标表，并删除所述目标临时表。

在本申请的一些实施例中，所述将所述待迁移数据文件复制到所述目标临时表，包括：