[发明专利]大数据采集任务的调度方法及装置

摘要

本申请提供了大数据采集任务的调度方法及装置，涉及数据处理领域，其中，大数据采集任务的调度方法包括中心服务器为大数据采集任务配置抵达参数、采集时长参数和截止时限参数，当抵达参数对应的时刻到达时，采集服务器执行该大数据采集任务，并判断采集时长参数是否到达预先设定的计时上限，若没有到达预先设定的计时上限，判断正在执行的第一大数据采集任务的截止时限参数是否小于当前到达抵达参数对应时刻的第二大数据采集任务的截止时限参数，当判断为是时，采集服务器继续执行第一大数据采集任务，再执行第二大数据采集任务；否则，采集服务器先执行第二大数据采集任务再执行第一大数据采集任务，从而能快速完成网络中的大数据采集。

主权项

大数据采集任务的调度方法，其特征在于，包括：中心服务器分别为接收到的各个大数据采集任务配置抵达参数、采集时长参数和截止时限参数；若所述抵达参数对应的时刻到达时，采集服务器开始执行所述抵达参数对应的大数据采集任务，且，将所述采集时长参数从0开始计时；当所述采集时长参数到达预先设定的计时上限，且，所述大数据采集任务已执行完毕时，则继续等待直到下一个所述抵达参数对应的时刻到达；当所述采集时长参数没有到达预先设定的计时上限时，则判断正在执行的第一大数据采集任务的截止时限参数是否小于当前到达抵达参数对应时刻的第二大数据采集任务的截止时限参数；如果是，采集服务器继续执行第一大数据采集任务直到执行完毕，再执行第二大数据采集任务；如果否，采集服务器执行第二大数据采集任务直到执行完毕，再执行第一大数据采集任务。