[发明专利]一种数据处理方法及装置

说明书

本发明实施例公开了一种数据处理方法及装置，其中所述数据处理方法包括：以第一时间间隔周期获取数据加工任务信息表中任务状态为待处理的第一目标加工任务的任务属性信息；根据所述任务属性信息中的任务程序标识调用对应的任务处理程序；根据所述任务处理程序的反馈信息将所述第一目标加工任务的任务属性信息中的任务状态更新为处理成功；根据所述任务属性信息中的任务标识在加工任务依赖关系信息表中获取依赖任务为所述第一目标加工任务的所有加工任务的任务依赖关系信息；将所述依赖任务为所述第一目标加工任务的所有加工任务的任务依赖关系信息中的依赖任务状态更新为处理成功。本发明实施例可以有效地提升数据处理的智能性和便捷性。

技术领域

本发明涉及互联网技术领域，尤其涉及一种数据处理方法及装置。

背景技术

随着计算机技术的发展，数据处理系统的任务也相应变得复杂。对于大规模的数据处理系统，特别针对金融领域内的数据处理，通常需要对众多数据源系统传送来的数据进行加工处理；这些源数据的更新和变动都很频繁，而且针对所述源数据进行的加工任务之间通常有复杂的依赖关系。

现有技术中，面对海量的源数据，数据处理系统通常仅按照源数据文件的到达顺序随机进行加工处理，如果加工任务之间存在依赖关系，所述数据处理系统只能通过控制源数据的到达顺序从而达到先后对源数据进行加工的目的，这种做法降低了数据处理的智能性和便捷性。

发明内容

本发明实施例提供一种数据处理方法及装置，能够灵活控制数据的加工顺序，从而有效地提升数据处理的智能性和便捷性。

本发明实施例第一方面提供了一种数据处理方法，所述方法包括：

以第一时间间隔周期获取数据加工任务信息表中任务状态为待处理的第一目标加工任务的任务属性信息；

根据所述第一目标加工任务的任务属性信息中的任务程序标识调用对应的任务处理程序；

接收所述任务处理程序的反馈信息，并根据所述反馈信息将所述第一目标加工任务的任务属性信息中的任务状态更新为处理成功；

根据所述第一目标加工任务的任务属性信息中的任务标识在加工任务依赖关系信息表中获取依赖任务为所述第一目标加工任务的所有加工任务的任务依赖关系信息；

将所述依赖任务为所述第一目标加工任务的所有加工任务的任务依赖关系信息中的依赖任务状态更新为处理成功。

在本发明实施例第一方面的第一种可能的实现方式中，所述方法还包括：

以第二时间间隔周期获取所述数据加工任务信息表中任务状态为等待的第二目标加工任务的任务属性信息；

根据所述第二目标加工任务的任务属性信息中的任务标识在所述加工任务依赖关系信息表中获取所述第二目标加工任务的所有任务依赖关系信息；

判断所述第二目标加工任务的所有任务依赖关系信息中的依赖任务状态是否均为处理成功，所述依赖任务状态用以标识所述第二目标加工任务的依赖任务的任务状态；

若是，则将所述第二目标加工任务的任务属性信息中的任务状态更新为待处理。

在本发明实施例第一方面的第二种可能的实现方式中，所述以第一时间间隔周期获取数据加工任务信息表中任务状态为待处理的第一目标加工任务的任务属性信息包括：

以第一时间间隔周期获取所述数据加工任务信息表中任务状态为待处理的所有加工任务的任务属性信息；

判断所述任务状态为待处理的所有加工任务是否大于一个；

若是，则按照所述任务状态为待处理的所有加工任务的任务属性信息中的优先级进行排序；

确定优先级最高的加工任务为所述第一目标加工任务。