[发明专利]一种基于数据仓库模型的数据处理方法及装置

权利要求书

1.一种基于数据仓库模型的数据处理方法，其特征在于，所述基于数据仓库模型的数据处理方法包括：

获取待处理逻辑表；

获取数据仓库模型，其中，所述数据仓库模型分为ODS原始数据层、DWD明细数据层、DWS汇总数据层以及ADS应用数据层；

将所述待处理逻辑表输入数据仓库模型，得到输出数据。

2.根据权利要求1所述的基于数据仓库模型的数据处理方法，其特征在于，所述将所述待处理逻辑表输入数据仓库模型，得到输出数据，包括：

将所述待处理逻辑表输入ODS原始数据层；

利用ODS原始数据层从数据源获取业务相关数据，所述业务相关数据包括业务系统数据、业务运行的日志数据、机器运转产生的日志数据、网络爬虫或者其他方式获取的外部数据；

将业务相关数据输入DWD明细数据层、DWS汇总数据层以及ADS应用数据层，得到输出数据。

3.根据权利要求2所述的基于数据仓库模型的数据处理方法，其特征在于，所述将业务相关数据输入DWD明细数据层、DWS汇总数据层以及ADS应用数据层，得到输出数据，包括：

将业务相关数据输入DWD明细数据层；

利用DWD明细数据层对所述业务相关数据进行清洗，得到清洗后的业务相关数据，其中，在DWD明细数据层根据配置好的表结构配置对应的SQL任务，自动创建表与生产表数据的定时调度任务；

将清洗后的业务相关数据输入DWS汇总数据层以及ADS应用数据层，得到输出数据。

4.根据权利要求3所述的基于数据仓库模型的数据处理方法，其特征在于，所述将清洗后的业务相关数据输入DWS汇总数据层以及ADS应用数据层，得到输出数据，包括：

将清洗后的业务相关数据输入DWS汇总数据层；

利用DWS汇总数据层根据配置好的衍生指标和复合指标生成对应的数据表与调度任务承载数据；

利用ADS应用数据层根据配置好的多个指标作为维度以及指标字段，生成对应的数据表与调度任务承载应用层的数据，得到输出数据。

5.根据权利要求2所述的基于数据仓库模型的数据处理方法，其特征在于，所述利用ODS原始数据层从数据源获取业务相关数据，包括：

在ODS原始数据层的数据同步任务中配置spark或datax同步任务，自动创建对应的目标表与定时同步任务；

基于对应的目标表与定时同步任务从数据源获取业务相关数据。

6.根据权利要求1所述的基于数据仓库模型的数据处理方法，其特征在于，所述基于数据仓库模型的数据处理方法包括：

创建原子指标、衍生指标以及复合指标。

7.根据权利要求6所述的基于数据仓库模型的数据处理方法，其特征在于，所述创建原子指标、衍生指标以及复合指标，包括：

新增原子指标，选择明细数据表，配置计算逻辑，保存发布，新增衍生指标，选择原子指标，选择汇总数据表，输入业务限定，保存发布，新增复合指标，选择衍生指标，编写指标计算逻辑，保存发布。

8.一种基于数据仓库模型的数据处理装置，其特征在于，所述基于数据仓库模型的数据处理装置包括：

第一获取单元，用于获取待处理逻辑表；

第二获取单元，用于获取数据仓库模型，其中，所述数据仓库模型分为ODS原始数据层、DWD明细数据层、DWS汇总数据层以及ADS应用数据层；

输入单元，用于将所述待处理逻辑表输入数据仓库模型，得到输出数据。

9.一种电子设备，其特征在于，所述电子设备包括：

一个或多个处理器；

存储器；以及

一个或多个应用程序，其中所述一个或多个应用程序被存储于所述存储器中，并配置为由所述处理器执行以实现权利要求1至7中任一项所述的基于数据仓库模型的数据处理方法。

10.一种计算机可读存储介质，其特征在于，其上存储有计算机程序，所述计算机程序被处理器进行加载，以执行权利要求1至7中任一项所述的基于数据仓库模型的数据处理方法的步骤。