[发明专利]一种行为日志数据管理系统及方法

说明书

技术领域

本发明涉及互联网技术领域，尤其涉及一种行为日志数据管理系统及方法。

背景技术

在互联网领域中，日志数据可以说是有价值的信息宝库，通过对终端的行为日志数据进行离线分析和实时分析是改善产品和保障服务稳定性的好办法。例如，通过对各种操作系统、应用程序、设备和安全产品的日志数据进行分析，能够提前发现和避开灾难，并且找到安全事件的根本原因，从而有效地保护和提高的网络安全。

目前，为了便于对行为日志数据的分析，行为日志数据的管理分为两种方式：一种是分散式管理，另一种是集中式管理。常规的日志分析需求主要采用分散式管理，即终端的行为日志数据分析都分散在各个业务服务器，各个业务服务器分别收集的终端的行为日志数据，并对终端的行为日志数据做离线和实时分析，以提前发现和避开灾难，从而有效地保护和提高的网络安全。而集中式管理中，各个业务服务器只需要将终端的行为日志数据远程打印到中心日志服务器，然后由专门的日志分析服务器来管理和分析终端的行为日志数据，以提前发现和避开灾难，从而有效地保护和提高的网络安全。

在实现本发明的过程中，发明人发现至少存在以下问题：目前的分散式管理行为日志数据技术中，行为日志数据分散存储在各个业务服务器中，各业务服务器分别处理对应的行为日志数据管理和分析工作，该技术方案难于满足需要整合各个不同业务的终端的行为日志数据并做综合统计分析的需求。目前的常规的日志分析需求采用的集中式管理日志数据技术中，所有的行为日志数据集中存储在一个业务服务器中，又难以满足个性化的实时分析日志数据的需求，例如积分系统要根据终端的行为日志数据实时的给用户添加积分，而哪些行为要添加积分以及这些终端行为根据什么规则来添加积分也是一个与积分系统紧耦合并不断变化的问题。目前的分散式管理行为日志数据技术和集中式管理行为日志数据技术，均无法同时兼顾个性化日志实时分析需求和常规的日志分析需求。

发明内容

本发明实施例提供一种行为日志数据管理系统及方法，能够同时兼顾个性化日志实时分析需求和常规的日志分析需求，用于实现分散式管理行为日志数据和集中式管理行为日志数据的同时兼顾。

第一方面，本发明实施例提供一种行为日志数据管理系统，所述系统包括：至少一台前端业务服务器、中心日志服务器、中心配置服务器和至少一台个性化日志服务器；所述前端业务服务器与所述中心日志服务器连接，所述中心日志服务器分别与所述中心配置服务器和所述个性化日志服务器连接；

所述前端业务服务器，用于采集终端的行为日志数据，并将采集到的所述行为日志数据存储至所述中心日志服务器；

所述中心配置服务器，用于记录日志数据分发配置文件，所述行为日志数据分发配置文件包括所述行为日志数据的标识与所述个性化日志服务器的标识之间的对应关系；

所述中心日志服务器，用于存储所述行为日志数据，读取所述中心配置服务器中记录的所述行为日志数据分发配置文件，并根据所述行为日志数据分发配置文件和存储的所述行为日志数据的标识，获取对应的个性化日志服务器的标识，向所述对应的个性化日志服务器发送所述行为日志数据。

可选地，在上述第一方面的第一实现方式中，所述前端业务服务器，具体用于调用所述中心日志服务器中的客户端软件开发工具包采集并记录所述终端的行为日志数据。

可选地，在上述第一方面的第二实现方式中，所述中心日志服务器，还用于分析所存储的所述行为日志数据，获取网络的安全状态。

可选地，在上述第一方面的第三实现方式中，所述个性化日志服务器，还用于分析所接收的所述行为日志数据，获取所述终端的行为状态。

可选地，在上述第一方面的第四实现方式中，所述行为日志数据的标识包括所述行为日志数据的格式，所述个性化日志服务器的标识包括所述个性化日志服务器的IP和端口中的至少一个。

第二方面，本发明实施例提供一种行为日志数据管理方法，所述方法包括：

前端业务服务器采集终端的行为日志数据，并将采集到的所述行为日志数据存储至中心日志服务器；

所述中心日志服务器读取中心配置服务器中记录的行为日志数据分发配置文件，所述行为日志数据分发配置文件包括所述行为日志数据的标识与分析所述行为日志数据的个性化日志服务器的标识之间的对应关系；

所述中心日志服务器根据所述行为日志数据分发配置文件和存储的所述行为日志数据的标识，获取对应的个性化日志服务器的标识；