[发明专利]一种数据关系处理方法及系统

说明书

本申请实施例提供一种数据关系处理方法及系统，涉及计算机技术领域。该数据关系处理方法包括：获取待梳理数据；根据所述待梳理数据获得主键信息；获取预设主题表数据；根据所述预设主题表数据和所述主键信息遍历所述待梳理数据，生成所述待梳理数据的实体关系图数据。该数据关系处理方法可以实现提高检索效率的技术效果。

技术领域

本申请涉及计算机技术领域，具体而言，涉及一种数据关系处理方法、系统、电子设备及计算机可读存储介质。

背景技术

目前，在企业信息化建设过程中，各种业务系统和工具应用越来越多，数据量呈现指数级增加，建立企业级数据仓库(数仓)有利于打通系统间数据孤岛，提高商业决策水平。从接入数据时效性来分，数仓可分成离线数仓和实时数仓。离线数仓主要用于处理批数据，即历史大数据。实时数仓主要用于处理流数据，即实时大数据。在早期数仓技术没这么成熟的时候，企业数仓建设以离线数仓为主，随着数仓技术不断演进，实时数仓日益成熟，对数据时效性要求高的企业纷纷建立起自家的实时数仓，现在大部分企业采用批流一体化的架构。

现有技术中，在大数据数仓下，面对复杂业务及成千上万张表，当需要找到与某个主题相关的所有表时，即使有数仓的支持，仍要花费很长的人工时间，检索效率低下。

发明内容

本申请实施例的目的在于提供一种数据关系处理方法、系统、电子设备及计算机可读存储介质，可以实现提高检索效率的技术效果。

第一方面，本申请实施例提供了一种数据关系处理方法，包括：

获取待梳理数据；

根据所述待梳理数据获得主键信息；

获取预设主题表数据；

根据所述预设主题表数据和所述主键信息遍历所述待梳理数据，生成所述待梳理数据的实体关系图数据。

在上述实现过程中，该数据关系处理方法通过待梳理数据获得主键信息，并根据主键信息和主题表数据，对待梳理数据进行遍历操作，从而生成待梳理数据的实体关系图数据；通过待梳理数据的实体关系图数据，可以快速地从待梳理数据的成千上万张表中查找到与某一主题相关的所有表，从而实现提高检索效率的技术效果。

进一步地，在所述根据所述待梳理数据获得主键信息的步骤之后，所述方法还包括：

根据所述主键信息获取类型信息、长度信息、主键别名信息和匹配规则信息。

进一步地，所述待梳理数据中包括多个表数据，所述根据所述预设主题表数据和所述主键信息遍历所述待梳理数据，生成所述待梳理数据的实体关系图数据的步骤，包括：

以所述主题表数据为中心向周围扩散，依次匹配所述待梳理数据中的每个表数据，根据匹配到的表数据执行以下处理：

根据所述主键信息进行所述主题表数据与所述表数据的匹配处理，生成匹配结果数据；

根据所述匹配结果数据生成所述实体关系图数据。

进一步地，所述根据所述主键信息进行所述主题表数据与所述表数据的匹配处理，生成匹配结果数据的步骤，包括：

判断所述主题表数据的主键信息与所述表数据的主键信息是否一致，若是，则匹配成功并生成匹配度信息；

若否，遍历所述表数据的所有字段，并对遍历到的字段进行以下处理：

根据所述字段的类型、长度匹配所述主题表数据的主键信息，生成匹配度信息；

根据所述匹配度信息生成匹配结果数据。

进一步地，所述主键信息设置有预设匹配规则，所述主键信息进行所述主题表数据与所述表数据的匹配处理，生成匹配结果数据的步骤，包括：