[发明专利]用于车辆数据接收和实时分析的集群分布式系统及方法

说明书

技术领域

本发明涉及车辆数据接收和实时分析领域，具体地，涉及一种用于车辆数据接收和实时分析的集群分布式系统及方法。

背景技术

随着我国汽车数量的不断增加，需要对大量采集的车辆数据进行处理，而现有技术对车辆数据的接受和实时分析时仍采用如图1所示的方法，在每个汇聚点上进行车辆数据的各种分析运算。而采用这样的方式，在数据接收和数据分析上都是会有很大的延时，而且当一个汇聚点上的接收或者分析模块宕机后，在汇聚点修复之前，整个汇聚点下的所有设备数据接受和分析都会中断，造成数据的丢失或者成批量的数据长时间无法分析。

发明内容

本发明的目的在于，针对上述问题，提出一种用于车辆数据接收和实时分析的集群分布式系统及方法，以实现防止因一个汇聚点上的接收或者分析模块宕机后造成的数据传输中断，及因中断造成的数据的丢失或者成批量的数据长时间无法分析的优点。

为实现上述目的，本发明采用的技术方案是：

一种用于车辆数据接收和实时分析的集群分布式系统，包括前端设备、通信服务器和分析服务器，

所述前端设备：收集车辆数据；

所述通信服务器：接收上述前端设备采集的车辆数据；

所述分析服务器：接收上述由通信服务器传输的前端设备采集的车辆数据并进行数据处理；

所述多个通信服务器组合为一个接收集群；

所述多个分析服务器组合为一个分析集群；

上述接收集群和分析集群中设置有集群管理器和集群服务器状态列表；

上述集群管理器：根据服务器的工作负载性能数值，动态的分配连接地址，在上述通信服务器和前端设备间及分析服务器和通信服务器间建立通信，并负责整个集群中服务器的运行和对外的服务响应；

上述集群服务器状态列表：保存上述通信服务器和分析服务器自身的实时运行状态和性能数值。

一种用于车辆数据接收和实时分析的集群分布式的方法，包括以下步骤：

前端设备向接收集群提出连接请求；

上述接收集群中的集群管理器接收到上述请求并根据接收集群内集群服务器状态列表中的通信服务器的实时运行状态和性能数值计算通信服务器的工作负载性能数值；

上述接收集群中的集群管理器根据上述计算的工作负载性能数值分配连接地址；

上述接收集群中的集群管理器根据上述分配的连接地址在通信服务器与前端设备间建立通信；

上述接收集群中的集群管理器向分析集群提出连接请求；

上述分析集群中的集群管理器接收上述请求，并根据分析集群内集群服务器状态列表中的分析服务器的实时运行状态和性能数值计算分析服务器的工作负载性能数值；

上述分析集群中的集群管理器根据上述工作负载性能数值分配连接地址；

上述分析集群中的集群管理器根据上述分配的连接地址在分析服务器和通信服务器间建立通信。

根据本发明的优选实施例，所述接收集群中的集群管理器接收到上述请求并根据接收集群内集群服务器状态列表中的通信服务器的实时运行状态和性能数值计算通信服务器的工作负载性能数值，包括以下步骤：

上述集群管理器从集群服务器状态列表中读取通信服务器的实时运行状态和性能数值；

上述集群管理器分析上述通信服务器的实时运行状态和性能数值判断上述集群服务器状态列表中通信服务器的信息是否及时更新；

如通信服务器的信息没有及时更新则从新读取通信服务器的实时运行状态和性能数值；

如通信服务器的信息得到及时更新集群管理器则根据上述通信服务器的信息计算通信服务器的工作负载性能数值。

根据本发明的优选实施例，所述分析集群中的集群管理器接收上述请求，并根据分析集群内集群服务器状态列表中的分析服务器的实时运行状态和性能数值计算分析服务器的工作负载性能数值，包括以下步骤：

上述集群管理器从集群服务器状态列表中读取分析服务器的实时运行状态和性能数值；

上述集群管理器分析上述分析服务器的实时运行状态和性能数值判断上述集群服务器状态列表中分析服务器的信息是否及时更新；

如分析服务器的信息没有及时更新则从新读取分析服务器的实时运行状态和性能数值；

如分析服务器的信息得到及时更新集群管理器则根据上述分析服务器的信息计算分析服务器的工作负载性能数值。

根据本发明的优选实施例，所述服务器的工作负载性能数值的计算公式如下：