[发明专利]一种海量日志存储管理系统和方法

说明书

技术领域

本发明涉及通信网络中的日志存储管理技术，特别涉及一种海量日志存储管理系统和方法。

背景技术

在电信通讯网络分组交换域(PS域，Packet Switched Domain)系统设备中，验证、授权和计费(AAA)服务器作为用户进行PS业务的认证、授权、计费中心，具有非常重要的地位和作用。AAA服务器需要对用户使用PS业务的身份进行认证，同时对用户使用PS业务的相关参数进行授权，并记录用户的原始计费话单，用以提供给计费中心进行用户计费管理。

如果用户在AAA服务器上认证或者授权失败，则用户将不能够使用PS相关业务，因此，AAA服务器记录用户认证或者授权失败原因就显得至关重要。AAA服务器为了方便对用户认证或者授权失败原因进行事后的分析，一般采用记录日志的方式记录对用户认证或者授权的相关信息。

采用记录日志的方式，能够完整记录用户认证或者授权过程；并且，日志中记录的信息比较详尽，大部分日志中会同时记录用户出错所在的源码位置等信息。正因如此，AAA服务器详尽的记录日志也带来相应的问题：由于AAA服务器在很短的时间内就会产生海量日志信息，占用的磁盘空间非常大，如果对产生的海量日志信息不进行控制，将会导致AAA服务器由于磁盘空间占用过高而运行异常。

针对这种情况，一般现有的AAA服务器上的日志系统都会根据一定的策略，对生成的、指定日期前的日志信息进行覆盖或者清除等操作，不存储海量日志信息在AAA服务器上。但这种操作带来的后果是：如果AAA服务器需要回溯某个时段以前用户的认证或者授权失败的原因时，可能会因为没有相应的记录日志信息而无法回溯查看，这样，就可能会影响操作维护时对用户认证或者授权失败原因的回溯、查找和分析，从而增加维护的成本和开销。

发明内容

有鉴于此，本发明的主要目的在于提供一种海量日志存储管理系统和方法，在尽可能不影响AAA服务器正常运行的基础上，实现对AAA服务器产生的海量日志信息进行存储、管理和维护。

为达到上述目的，本发明的技术方案是这样实现的：

本发明提供了一种海量日志存储管理系统，包括：

日志收集和上传客户端模块，部署于验证、授权和计费AAA服务器上，用于收集AAA服务器产生的日志信息，并上传给日志服务模块；

日志服务模块，用于接收日志收集和上传客户端模块发来的AAA服务器产生的日志信息，并进行分析、存储和管理。

上述方案中，所述日志服务模块进一步包括：第二配置信息单元、信息获取单元、信息存储和管理单元；其中，

第二配置信息单元，用于配置日志信息存储原则；信息获取单元，用于获取日志收集和上传客户端模块上传的AAA服务器产生的日志信息，并送至信息存储和管理单元；信息存储和管理单元，用于根据配置的日志信息存储原则，对收到的AAA服务器产生的日志信息进行存储。

上述方案中，所述日志服务模块进一步包括：信息过滤单元；第二配置信息单元，还用于配置日志信息过滤原则；信息过滤单元，用于对收到的AAA服务器产生的日志信息根据设置的日志信息过滤原则进行过滤，之后送至信息存储和管理单元；相应的，所述信息获取单元，将获取的日志信息送至信息过滤单元；所述信息存储和管理单元，将过滤后的AAA服务器产生的日志信息进行存储。

上述方案中，所述日志服务模块进一步包括：信息分析单元和人机接口；信息分析单元，用于根据操作指令，对指定的信息进行查找分析并提供分析结果；人机接口，用于接受对日志服务模块的操作指令、以及对日志信息过滤原则和日志信息存储原则的配置，显示信息分析单元的分析结果。

上述方案中，所述日志服务模块为独立的日志服务器，设置于分组交换PS网络中；或为独立的逻辑模块，设置于AAA服务器上。

上述方案中，所述日志收集和上传客户端模块进一步包括：第一配置信息单元、日志收集单元和日志上传单元；其中，

第一配置信息单元，用于设置收集配置信息和上传配置信息；日志收集单元，用于收集AAA服务器产生的日志信息，并将收集到的日志信息压缩，临时存储在指定的临时目录下；日志上传单元，用于向日志服务模块上传指定临时目录下的、AAA服务器产生的日志信息。

本发明还提供了一种海量日志存储管理方法，包括：

设置独立的日志服务模块，并在AAA服务器上部署日志收集和上传客户端模块，且分别设置配置信息；

日志收集和上传客户端模块收集AAA服务器产生的日志信息，并将收集到日志信息上传给日志服务模块；