[发明专利]数据迁移方法、装置、电子设备和存储介质

说明书

本公开关于一种数据迁移方法、装置、电子设备和存储介质，属于计算机应用领域。其中，该数据迁移方法包括：获取目标系统对应的至少一个中间表；获取目标系统与相关系统之间的共用信息；根据共用信息，将旧线系统的数据迁入至对应的中间表中；在确定中间表通过第一级数据质量检验后，将中间表迁入至目标系统的目标表中。由此，本公开通过中间表隔离旧线数据变化对新线系统的影响，通过检核中间表的迁移质量，提高目标表的数据可靠性，并通过提出共用信息解决了迁移数据冲突，保证迁移数据来源单一、准确，同时通过数据质量检验规则，确保了迁移资产的复用性，从而在保证新线系统的稳定性的基础上，有效缩短了数据迁移时长、提高了数据迁移效率。

技术领域

本公开涉及计算机应用领域，尤其涉及一种数据迁移方法、装置、电子设备和存储介质。

背景技术

相关技术中，对公信贷产品在对外输出时，不同银行的旧线系统管理要求、发展程度、数据质量要求、系统粒度等都存在很大不同。在新线系统替换旧线系统的过程中，即进行数据迁移的过程中，通常着眼于新线系统的应用模型，即新、旧系统模型直接点对点进行映射或关联。然而，由于新、旧线系统的数据表、数据字段、取值等普遍与新系统存在较大差异，通常存在新线系统的目标表的数据可靠性低、新线系统产品的稳定性差，迁移工作、迁移规则需多次重复等问题，数据迁移时长较长，数据迁移效率较低。

发明内容

本公开提供一种数据迁移方法、装置、电子设备、计算机可读存储介质和计算机程序产品，以至少解决相关技术中数据迁移过程的新线系统的目标表的数据可靠性低、新线系统产品的稳定性差，迁移工作、迁移规则需多次重复的问题。

本公开的技术方案如下：

根据本公开实施例的第一方面，提供一种数据迁移方法，包括：从新线系统中选取任一目标系统，并获取所述目标系统对应的至少一个中间表；获取所述目标系统与对应的相关系统之间的共用信息，其中，所述相关系统为与所述新线系统存在共用信息的系统；根据所述共用信息，将旧线系统的数据迁入至对应的所述中间表中；对所述中间表进行第一级数据质量检验，并在确定所述中间表通过所述第一级数据质量检验后，将所述中间表迁入至所述目标系统的目标表中。

在本公开的一个实施例中，所述根据所述共用信息，将旧线系统的数据迁入至对应的所述中间表中，包括：根据所述共用信息，确定信息主体来源；根据所述信息主体来源，将所述旧线系统的数据迁入至对应的所述中间表中。

在本公开的一个实施例中，所述根据所述共用信息，确定信息主体来源，包括：获取所述共用信息的描述信息；根据所述描述信息对所述共用信息进行数据项主责认定，以确定所述信息主体来源。

在本公开的一个实施例中，所述共用信息的所述描述信息，至少包括以下之一：版本信息、最后更新时间、修改权限、应用场景。

在本公开的一个实施例中，所述将所述中间表迁入至所述目标系统的目标表中之后，还包括：对所述目标表进行第二级数据质量检验，并确定所述目标表通过所述第二级数据质量检验。

在本公开的一个实施例中，所述对所述目标表进行第二级数据质量检验之后，还包括：从所述目标表中选取至少一个第一待检测数据；直接从所述旧线系统提取每个所述第一待检测数据对应的第二待检测数据；获取所述第一待检测数据和所述第二待检测数据之间的偏差，并确定所述偏差小于或者等于目标偏差阈值。

在本公开的一个实施例中，还包括：确定所述偏差大于所述目标偏差阈值，根据所述偏差和所述目标偏差阈值，获取偏差率；根据所述偏差和所述偏差率，获取数据迁移优化策略。

在本公开的一个实施例中，所述获取所述目标系统对应的至少一个中间表，包括：获取所述目标系统运行的必要数据表，及所述目标系统的数据的基础数据字段；对所述必要数据表和所述基础数据字段进行预处理，以获取所述中间表。