[发明专利]带宽数据核对方法、装置、介质及电子设备

说明书

本公开涉及一种带宽数据核对方法、装置、介质及电子设备。应用于调度节点的方法包括：获取从任务队列中弹出的多个补采任务，根据多个补采任务之间的关联关系进行分组，得至少一个补采任务组，每当采集核对节点在带宽数据核对不通过时，生成补采任务，将它发送至调度节点，由调度节点将其压入任务队列；针对各补采任务组，从多个采集核对节点中确定用于执行补采任务组内所有补采任务的目标节点；将各补采任务组和各目标节点发送至任务队列节点。这样，一个补采任务组内的、具有关联关系的各补采任务均由同一采集核对节点集中执行，具有关联关系的各补采任务的执行时间相差较短，与补采任务组相关的带宽数据能及时再次核对，保证带宽数据核对效率。

技术领域

本公开涉及数据处理技术领域，具体地，涉及一种带宽数据核对方法、装置、介质及电子设备。

背景技术

多云带宽数据采集过程中，需要从各带宽服务提供者（即云厂商）采集带宽数据，带宽数据是否准确实时，直接影响到带宽服务使用者体验。在带宽数据采集过程中，可能会出现的接口故障、网络故障等问题，这些将会影响带宽数据采集的时效性和带宽数据的准确性。因此，需要对采集的带宽数据进行核对，并在核对不通过时，对带宽数据进行补采，之后，根据补采数据再次进行核对。其中，如何保证补采任务的高效率执行，是提升带宽数据核对效率的关键。

发明内容

为了克服相关技术中存在的问题，本公开提供一种带宽数据核对方法、装置、介质及电子设备。

为了实现上述目的，第一方面，本公开提供一种带宽数据核对方法，应用于带宽数据核对系统中的调度节点，其中，所述带宽数据核对系统包括所述调度节点、任务队列节点以及多个采集核对节点，所述方法包括：

获取从任务队列中弹出的多个补采任务，根据所述多个补采任务之间的关联关系，对所述多个补采任务进行分组，得到至少一个补采任务组，其中，所述补采任务用于指示重新采集离线日志或带宽数据，每当所述采集核对节点在确定带宽数据核对不通过时，生成补采任务，并将该补采任务发送至所述调度节点，以由所述调度节点将该补采任务压入所述任务队列；

针对每一所述补采任务组，从所述多个采集核对节点中确定用于执行所述补采任务组内所有补采任务的目标节点；

将每一所述补采任务组和用于执行每一所述补采任务组内所有补采任务的目标节点发送至所述任务队列节点。

可选地，所述补采任务包括补采时段和带宽服务使用者；

所述根据所述多个补采任务之间的关联关系，对所述多个补采任务进行分组，包括：

将带宽服务使用者相同、且补采时段相同的补采任务作为一个补采任务组。

第二方面，本公开提供一种带宽数据核对方法，应用于带宽数据核对系统中的任一采集核对节点，其中，所述带宽数据核对系统包括调度节点、任务队列节点以及多个所述采集核对节点，所述方法包括：

响应于当前采集时刻采集到任一带宽服务提供者的带宽接口的实时带宽数据，获取所述当前采集时刻所属时段内的、所述带宽服务提供者的离线日志和所述当前采集时刻的前一采集时刻采集到的、所述带宽接口的历史带宽数据；

根据所述离线日志、所述历史带宽数据以及所述实时带宽数据，进行带宽数据核对；

若带宽数据核对不通过，则生成用于指示重新采集所述当前采集时刻所属时段内的、所述带宽服务提供者的离线日志或所述带宽接口在所述当前采集时刻的实时带宽数据的补采任务，并将所述补采任务发送至所述调度节点，以由所述调度节点将所述补采任务压入任务队列中。

可选地，所述方法还包括：

确定所述带宽接口在所述当前采集时刻的历史同期时刻对应的同比带宽数据；

所述根据所述离线日志、所述历史带宽数据以及所述实时带宽数据，进行带宽数据核对，包括：