[发明专利]大数据平台的元数据处理方法、装置及电子设备

权利要求书

1.一种大数据平台的元数据处理方法，其特征在于，所述方法包括：

获取至少一个大数据平台存储的元数据；

将各所述元数据进行标准化处理，得到对应的标准化元数据；其中，所述标准化元数据用于提供给至少一个应用端。

2.根据权利要求1所述的方法，其特征在于，其中，所述将各所述元数据进行标准化处理，得到标准化元数据，包括：

针对每一大数据平台存储的不同版本的元数据，将各所述元数据进行标准化处理，得到标准化元数据。

3.根据权利要求1或2所述的方法，其特征在于，其中，所述将各所述元数据进行标准化处理，得到标准化元数据，包括：

将各所述元数据中的至少一个维度的数据的数据特征，处理成标准化元数据的数据特征；

其中，所述数据特征包括数据格式、数据结构和数据单位中的至少一项。

4.根据权利要求3所述的方法，其特征在于，其中，所述至少一个维度的数据包括以下至少一项：

元数据表、表字段、表分区元信息、节点和表血缘关系、表血缘、字段血缘、数据服务元信息、任务运行元信息、任务节点元信息和大数据节点血缘元数据。

5.根据权利要求1所述的方法，其特征在于，其中，所述方法还包括：

针对每一大数据平台，根据所述大数据平台的元数据的版本信息，在预先配置的至少一个获取方式中确定所述元数据的获取方式。

6.根据权利要求5所述的方法，其特征在于，其中，所述至少一个获取方式包括以下至少一项：

调用应用程序编程接口API，通过所述API获取所述版本信息对应的所述大数据平台的元数据；

从所述大数据平台的元数据库中获取所述版本信息对应的元数据。

7.根据权利要求1所述的方法，其特征在于，其中，所述获取至少一个大数据平台存储的元数据，包括：

接收至少一个应用端发送的元数据获取请求，各所述元数据获取请求中携带元数据的第一标识信息；

根据各所述元数据获取请求，在所述至少一个大数据平台中获取各所述第一标识信息对应的元数据；

其中，所述第一标识信息包括大数据平台的第二标识信息和元数据的维度信息中的至少一项。

8.根据权利要求7所述的方法，其特征在于，其中，所述方法还包括：

根据各所述应用端发送的元数据的第一标识信息，将所述标准化元数据提供给对应的应用端。

9.根据权利要求1所述的方法，其特征在于，其中，所述获取至少一个大数据平台存储的元数据，包括：

基于预设的时间周期从所述至少一个大数据平台获取元数据。

10.一种大数据平台的元数据处理装置，其特征在于，所述装置包括：

元数据获取模块，用于获取至少一个大数据平台存储的元数据；

标准化处理模块，用于将各所述元数据进行标准化处理，得到对应的标准化元数据；其中，所述标准化元数据用于提供给至少一个应用端。

11.一种电子设备，其特征在于，包括：

至少一个处理器；以及

与所述至少一个处理器通信连接的存储器；其中，

所述存储器存储有可被所述至少一个处理器执行的指令，所述指令被所述至少一个处理器执行，以使所述至少一个处理器能够执行权利要求1-9中任一项所述的方法。

12.一种存储有计算机指令的非瞬时计算机可读存储介质，其特征在于，所述计算机指令用于使计算机执行权利要求1-9中任一项所述的方法。