[发明专利]数据装载方法、装置、设备及存储介质

说明书

本申请提供一种数据装载方法、装置、设备及存储介质。该方法应用于数据仓库系统，数据仓库系统根据数据文件对数据表进行数据装载，该方法包括：获取数据表的作业计划列表，作业计划列表包括多个作业计划，多个作业计划中每个作业计划对应有数据文件；在多个作业计划中，确定目标作业计划；若目标作业计划对应的数据文件不存在，则确定目标作业计划对应的数据文件的等待时间是否小于或等于预设时间；若目标作业计划对应的数据文件的等待时间小于或等于预设时间，则在数据表的预设装载策略指示能够跳过目标作业计划的情况下，跳过目标作业计划，并在多个作业计划中，确定新的目标作业计划。本申请的方法，提高了数据装载效率。

技术领域

本申请涉及计算机技术，尤其涉及一种数据装载方法、装置、设备及存储介质。

背景技术

随着计算机的发展，数据对企业来说越来越重要，根据数据流向可以将企业所使用的系统划分为上游系统和下游系统，上游系统和下游系统之间可以进行数据交互。

上游系统为产生数据的系统，下游系统为对数据进行利用的系统。上游系统需要将数据导出形成数据文件并发送给下游系统，下游系统根据数据文件进行数据装载。一般情况下，上游系统会将数据文件在次日向下游系统发送，而受很多因素影响，数据文件的生成时间不稳定，可能会存在某一天的数据文件无法生成，进而无法向下游系统发送。若下游系统未接收到该天的数据文件，会持续等待该天的数据文件。

然而，下游系统持续等待数据文件，会存在即使当天之后的数据文件到达也无法装载，导致数据装载效率低的问题。

发明内容

本申请提供一种数据装载方法、装置、设备及存储介质，用以解决数据装载效率低的问题。

第一方面，本申请提供一种数据装载方法，应用于数据仓库系统，所述数据仓库系统根据数据文件对数据表进行数据装载，所述方法包括：获取数据表的作业计划列表，所述作业计划列表包括多个作业计划，所述多个作业计划中每个作业计划对应有数据文件；在所述多个作业计划中，确定目标作业计划；若所述目标作业计划对应的数据文件不存在，则确定所述目标作业计划对应的数据文件的等待时间是否小于或等于预设时间；若所述目标作业计划对应的数据文件的等待时间小于或等于预设时间，则在所述数据表的预设装载策略指示能够跳过所述目标作业计划的情况下，跳过所述目标作业计划，并在所述多个作业计划中，确定新的目标作业计划。

第二方面，本申请提供一种数据装载装置，应用于数据仓库系统，所述数据仓库系统根据数据文件对数据表进行数据装载，所述装置包括：获取模块，用于获取数据表的作业计划列表，所述作业计划列表包括多个作业计划，所述多个作业计划中每个作业计划对应有数据文件；确定模块，用于在所述多个作业计划中，确定目标作业计划；确定模块，还用于若所述目标作业计划对应的数据文件不存在，则确定所述目标作业计划对应的数据文件的等待时间是否小于或等于预设时间；确定模块，还用于若所述目标作业计划对应的数据文件的等待时间小于或等于预设时间，则在所述数据表的预设装载策略指示能够跳过所述目标作业计划的情况下，跳过所述目标作业计划，并在所述多个作业计划中，确定新的目标作业计划。

第三方面，本申请提供一种电子设备，包括：存储器，处理器；存储器；用于存储所述处理器可执行指令的存储器；其中，所述处理器被配置为实现第一方面所述的方法。

第四方面，本申请提供一种计算机可读存储介质，所述计算机可读存储介质中存储有计算机执行指令，所述计算机执行指令被处理器执行时用于实现第一方面所述的方法。

第五方面，本申请提供一种计算机程序产品，包括计算机程序，该计算机程序被处理器执行时实现第一方面所述的方法。