[发明专利]具有通用元数据存储库的闭环统一元数据架构

说明书

对于以全球分布的方式捕获和保存大量信息，已经呈指数级增长。闭环统一元数据架构包括通用元数据存储库并且实现数据质量和数据沿袭分析。该架构解决了重要技术挑战，从而提供描述信息的元数据的有意义的一致的和归一化的视图以及确定数据沿袭和有意义的数据质量度量。

相关申请的交叉引用

根据35 U.S.C.§119，本申请要求享有在2016年11月18日提交的美国临时专利申请No.62/424,199的优先权，其全部内容通过引用并入本文。

技术领域

本公开涉及来自不同数据源的元数据的复杂处理，以提供统一元数据视图，并且使用元数据来驱动数据分析，该数据分析包括数据质量和数据沿袭分析。

背景技术

计算系统可用的处理能力、网络带宽、可用存储空间和其他资源近几十年已经呈指数级增长。包括本地计算系统和基于云的计算系统两者的计算系统的进步已经导致以全球分布的方式捕获、存储以及保存大量信息内容。获得描述信息内容的元数据的有意义的、一致的、归一化的视图以及对信息内容执行有意义的分析是个重大的技术挑战。

附图说明

图1示出实现通用元数据存储库的闭环通用元数据架构。

图2示出架构的另一示例实现方式。

图3示出架构可以实现的用于分析数据质量的逻辑的示例。

图4示出架构可以实现的用于分析数据沿袭的逻辑的示例。

图5示出架构可以实现的用于执行数据发现的逻辑的示例。

图6示出架构可以实现的用于执行将商业元数据映射到技术元数据对象的逻辑的示例。

图7是图示架构的功能的示例的框图。

图8是包括在架构内的逻辑层的示例的框图。

图9是用于架构的关联图表模式的示例。

图10是描绘沿袭数据结构的示例。

图11是图示架构的示例操作的操作流程图。

图12是图示架构的示例操作的图11的操作流程图的第二部分。

具体实施方式

闭环通用元数据架构(“架构”)实现通用元数据存储库(“UMR”)并且执行数据分析，该数据分析包括确定和维护数据沿袭以及确定有意义的数据质量度量。该架构自动扫描和捕获表征输入数据的元数据，该输入数据从无论是托管工作流的企业内部还是该企业外部的任何数目和类型的数据源被驱动到任何预定义的企业工作流。该架构可以被用程序以用于数据跟踪、管理、审查、报告和许多其他目的。

UMR在其向工作流提供输入数据的单个逻辑用户接口视图的意义上是通用的，该输入数据例如包括图表模式形式的商业数据和技术数据。该架构的编程能力经由例如相似性检测，来实现灵活的数据沿袭跟踪、数据质量确定、数据间隙填充和附加数据发现。UMR在整个企业平台上集成了任何所需的数据简档和相似性简档。该架构包括反馈回路，其例如施行商业规则，重新扫描数据源，并且在任何计划或定向的基础上更新UMR。

图1和图2提供了用于下文对架构中技术方案讨论的示例上下文，该架构包括UMR、数据质量度量、数据沿袭和报告。图1和图2中的示例示出了可能的实现方式。就此而言，架构中的技术方案在其应用或实现方式方面，不限于图1和图2或其他附图中的任一个所示的系统。相反，技术方案可以经由许多其他系统实现方式、架构和连接性而被实现。例如，本文讨论了对架构的附加硬件和软件实现方式、在架构中实现的附加逻辑流以及由架构定义和递送的附加GUI接口。