[发明专利]大数据平台的统一数据资源管理系统与方法

摘要

本发明属于大数据平台技术领域，具体涉及大数据平台的统一数据资源管理系统与方法。本发明针对大数据平台中由于存在各种不同类型的数据资源而导致的数据资源难以管理的问题，提出了针对不同类型数据资源的统一元数据描述，以及针对不同类型数据管理组件的统一适配器接口规范，并在此基础上设计了一种统一的数据资源管理方法和系统，支持统一的数据包上传和下载、统一的数据发现、统一的数据访问申请与授权等功能。本发明可实现系统的动态可扩展、多租户管理、以及统一的访问控制，便于用户管理和使用大数据平台中不同类型的数据资源。

主权项

一种用来刻画大数据平台中的不同类型数据资源的统一元模型，其特征在于，由如下四层结构组成：第一层是数据容器层，第二层是数据包层，第三层是数据资产层，第四层则是数据字段层；其中，所述的数据容器对应于某种数据管理组件的一个运行实例，所述的数据包是一组相关的数据资产的集合，所述的数据资产是由某一数据容器所管理的相对独立的数据对象，所述的数据字段是关系型数据资产的数据字段；在物理上，数据包由数据容器存储和管理，数据容器层对于普通用户是透明的，用户并不会感知到该层的存在，系统负责存储并维护数据包到数据容器之间的映射关系。