[发明专利]一种自动扩展的自助分析报表的方法及装置

说明书

本发明公开了一种自动扩展的自助分析报表的方法及装置，该方法包括以下步骤：将元数据表按照预设时间段复制到数仓中；对数仓中的元数据表进行预处理后得到描述和标准都一致的基础数据，形成新表；遍历扫描所述数仓中的每个表，对其表结构进行解析；依次两两对比各表之间的相同字段，判断两表之间是否存在匹配字段；如果两表之间存在匹配字段，建立并记录所述两表的关联关系数据，否则不记录；如果两表之间不存在匹配字段且存在关联关系，人工添加所述两表的关联关系数据，并将所述关联关系数据存储到数仓中，能够提高分析报表的灵活度和增加数据处理的覆盖面，以及在新增数据展示时，无需开发人员的二次工程开发。

技术领域

本发明属于大数据处理技术领域，尤其是涉及一种自动扩展的自助分析报表的方法及装置。

背景技术

大数据时代下为了更好地实现所拥有数据的价值，不同商业企业主要通过第三方数据分析系统或进行自有数据分析系统的开发，从而对企业自身运营过程中获得的数据进行分析，从中发现价值。而自助分析报表面向的是不具备IT背景的业务分析人员，在企业中的应用场景十分广阔。

现有技术中，通过用户自定义报表所需的展示字段与查询条件，得到定制化报表；或者用户自己编写SQL查询自己想要的报表数据。现有报表自助分析技术，分为以下几步：数据采集，数据加工与处理，形成宽表，将该宽表的字段封装成可视化操作界面，从而实现报表的定制化查询。

首先，现有技术不太灵活，当有新的数据要添加到报表自助分析中时，会存在一定的工程开发量来确保完成变化。对于业务发展较快、变化频繁的企业，这种自助分析报表不够灵活，需要大量开发人员响应新需求，不然无法更新。其次，自助分析报表只能覆盖企业数据中的小部分，即宽表里的数据；由于技术、存储容量等问题，企业大部分数据无法加载到宽表中，所以自助分析报表无法覆盖大部分数据，从而可能导致有些需求无法满足。

发明内容

有鉴于此，本发明实施例的目的在于提供一种自动扩展的自助分析报表的方法及装置，旨在提高分析报表的灵活度和增加数据处理的覆盖面，以及在新增数据展示时，无需开发人员的二次工程开发。

本发明采用的技术方案如下：

第一方面，本发明实施例提供的一种自动扩展的自助分析报表的方法，应用于自动扩展的自助分析报表的装置，所述自动扩展的自助分析报表的方法包括以下步骤：

将所述自动扩展的自助分析报表的装置中的元数据表按照预设时间段复制到所述自动扩展的自助分析报表的装置中的数仓中；

对所述数仓中的元数据表进行预处理后，得到描述和标准都一致的基础数据，并形成新表进行存储；

遍历扫描所述数仓中的每个表，对其表结构进行解析后存储字段基本信息；

依次两两对比各表之间的相同字段，判断两表之间是否存在匹配字段；

如果两表之间存在匹配字段，建立并记录所述两表的关联关系数据，否则不记录；

如果两表之间不存在匹配字段且存在关联关系，人工添加所述两表的关联关系数据，并将所述关联关系数据存储到数仓中。

进一步地，所述依次两两对比各表之间的相同字段，判断两表之间是否存在匹配字段的步骤具体包括：

当存在两表的字段名称完全相等时，判断所述两表之间存在匹配字段；

将每个表通过同一个映射表将字段名称进行转化，当转化后的字段名称完全相等时，判断所述两表之间存在匹配字段。

进一步地，所述对所述数仓中的元数据表进行预处理的步骤包括：

将多处存在的元数据表统一口径；

将多种描述形式的元数据表进行统一的格式处理或编码转化；