[发明专利]数据统计方法、装置、电子设备、计算机存储介质及系统

说明书

本申请公开了一种数据统计方法、装置、电子设备、计算机存储介质及系统，所述方法应用于基础服务单元时，包括：收集第一待统计数据；获取所述基础服务单元的数据版本和统计中心的数据版本；基于所述基础服务单元的数据版本和所述统计中心的数据版本，确定是否向所述统计中心提交所述第一待统计数据；在确定向所述统计中心提交所述第一待统计数据的情况下，将所述第一待统计数据提交至所述统计中心，以通过统计中心对第一待统计数据进行统计和处理。本申请使基础服务单元在提交收集的数据前，确定自身的数据版本与统计中心的数据版本是否一致，并基于确定结果判断是否向统计中心提交数据，避免因向统计中心提交重复的指标数据造成数据冲突。

技术领域

本申请实施例涉及数据处理领域，尤其涉及一种数据统计方法、装置、电子设备、计算机存储介质及系统。

背景技术

在当前大数据时代，越来越多的数据需要通过网络在各大数据平台之间进行实时传输。为了监测数据传输性能，掌握数据的流向及特征，需要在网络传输的两端对所发送/接收的数据进行实时统计。

随着传输数据量的不断增加，发送/接收端逐渐由大规模的处理集群替代了传输能力有限的单点传输系统，集群中可能包含几个到上百个节点，且集群中每个节点往往存在多个服务实例，每个服务实例又包含多个线程，即基础服务单元，基础服务单元又可处理多种数据。

目前，对于上述场景，缺少有效的方案对大规模的处理集群中包括的多个基础服务单元所处理的各种数据进行有效的统计和处理。

发明内容

为解决上述技术问题，本申请实施例提供了一种数据统计方法、装置、电子设备、计算机存储介质及系统。

本申请实施例提供了一种数据统计方法，所述方法应用于基础服务单元，所述方法包括：

收集第一待统计数据；

获取所述基础服务单元的数据版本和统计中心的数据版本；

基于所述基础服务单元的数据版本和所述统计中心的数据版本，确定是否向所述统计中心提交所述第一待统计数据；所述统计中心用于统计和处理至少一个基础服务单元收集的待统计数据；

在确定向所述统计中心提交所述第一待统计数据的情况下，将所述第一待统计数据提交至所述统计中心，以通过所述统计中心对所述第一待统计数据进行统计和处理。

本申请一可选实施方式中，所述基于所述基础服务单元的数据版本和所述统计中心的数据版本，确定是否向所述统计中心提交所述第一待统计数据，包括：

确定所述基础服务单元的数据版本与所述统计中心的数据版本是否相同；基于确定结果确定是否向所述统计中心提交所述第一待统计数据；

其中，若所述基础服务单元的数据版本与所述统计中心的数据版本不同，则确定向所述统计中心提交所述第一待统计数据；若所述基础服务单元的数据版本与所述统计中心的数据版本相同，则继续收集第二待统计数据；所述第二待统计数据为所述基础服务单元在收集所述第一待统计数据之后收集的新的待统计数据。

本申请一可选实施方式中，所述将所述第一待统计数据提交至所述统计中心后，所述方法还包括：

将收集的所述第一待统计数据进行重置，并将所述基础服务单元的数据版本更新为与所述统计中心相同的数据版本。

本申请一可选实施方式中，所述方法还包括以下至少一种：

在获取所述统计中心的数据版本前，向所述统计中心进行注册，获得所述统计中心所分配的标识信息和所述基础服务单元进行数据处理所需的资源；

在退出执行收集待统计数据的操作的情况下，向所述统计中心提交注销申请，以通过所述统计中心注销所述基础服务单元的标识信息和所述基础服务单元进行数据处理所需的资源。