[发明专利]基于ETL的数据分析方法、装置、设备和存储介质

说明书

本发明公开了一种基于ETL的数据分析方法装置、设备和存储介质，方法包括：获取ETL工具的类型；根据预设的ETL工具类型与可配置作业参数的关联关系，输出与ETL工具的类型相对应的可配置作业参数；若可配置作业参数已完成配置，且可配置作业参数对应的填写内容满足预设的调度条件，利用与ETL工具对应的调度工具的调度参数，对目标ETL任务进行调度，以执行目标ETL任务，实现了使用者仅需输入ETL工具的类型的情况下，自动输出与ETL工具的类型相对应的可配置作业参数，避免使用者花费大量时间去学习各种ETL工具，降低学习成本，且配置ETL工具的作业参数时，不易出现错误，提高ETL工具的作业参数的配置效率，进而提高了数据分析的质量。

技术领域

本发明属于数据分析技术领域，具体涉及一种基于ETL的数据分析方法、装置、设备和存储介质。

背景技术

ETL，是英文Extract-Transform-Load的缩写，用来描述将数据从来源端经过抽取(extract)、交互转换(transform)、加载(load)至目的端的过程。ETL是构建数据仓库的重要一环，使用者从数据源抽取出所需的数据，经过数据清洗，最终按照预先定义好的数据仓库模型，将数据加载到数据仓库中去。

目前，数据分析领域可使用的ETL工具类型众多，导致使用者在配置ETL工具的作业参数时，往往需要熟知各种ETL工具的作业参数才能顺利配置，这就使得使用者需要花费大量时间去学习各种ETL工具，学习成本较高，且在实际配置ETL工具的作业参数时，容易出现错误，降低了ETL工具的作业参数的配置效率，进而降低了数据分析的质量。

发明内容

本发明的主要目的是提供一种基于ETL的数据分析方法、装置、设备和存储介质，以解决现有技术中ETL工具的作业参数的配置效率较低，进而降低了数据分析的质量的问题。

针对上述问题，本发明提供了一种基于ETL的数据分析方法，包括：

获取ETL工具的类型；

根据预设的ETL工具类型与可配置作业参数的关联关系，输出与所述ETL工具的类型相对应的可配置作业参数；

若所述可配置作业参数已完成配置，检测与所述可配置作业参数对应的填写内容是否满足预设的调度条件；

若所述可配置作业参数对应的填写内容满足预设的调度条件，利用与所述ETL工具对应的调度工具的调度参数，对目标ETL任务进行调度，以执行所述目标ETL任务。

进一步地，上述所述的基于ETL的数据分析方法中，若所述可配置作业参数对应的填写内容满足预设的调度条件，利用与所述ETL工具对应的调度工具的调度参数，对目标ETL任务进行调度之前，还包括：

获取调度工具的类型；

根据预设的调度工具类型与可配置调度参数的关联关系，输出与所述调度工具的类型相对应的可配置调度参数；

响应所述可配置调度参数对应的填写内容，生成所述ETL工具对应的调度工具的调度参数。

进一步地，上述所述的基于ETL的数据分析方法中，获取调度工具的类型，包括：

响应针对调度工具的设置内容，生成所述调度工具的类型。

进一步地，上述所述的基于ETL的数据分析方法中，获取调度工具的类型，包括：

根据预设的ETL工具的类型与调度工具的类型的关联关系，输出至少一个建议调度工具的类型；

响应针对至少一个建议调度工具的类型的选择操作，生成所述调度工具的类型。

进一步地，上述所述的基于ETL的数据分析方法中，所述预设的调度条件包括：