[发明专利]日志文件处理方法、装置、计算机设备及存储介质

说明书

本申请属于云监控中的异常监控领域，具体为日志监控，并公开了一种日志文件处理方法、装置、计算机设备及存储介质，该方法包括：获取应用程序产生的日志文件，识别所述日志文件对应的文件格式；确定识别到的文件格式对应的文件解析规则；根据确定的文件解析规则解析所述日志文件以得到统一编码规范文件，通过预设文本分析规则分析所述统一编码规范文件以获取日志字段；根据所述日志字段生成数据维度统计表，并将所述数据维度统计表与历史的数据维度统计表作比对以获取差异信息；根据所述差异信息生成告警信息，输出所述告警信息。由此提高了不同格式的日志文件的处理速度，并降低了开发人员的工作量。

技术领域

本申请涉及互联网技术领域，尤其涉及一种日志文件处理方法、装置、计算机设备及存储介质。

背景技术

目前，互联网时代下各种应用程序均会产生日志文件，但日志文件的格式以及数据类型各式各样，面对不同类型的日志文件，由于格式不统一导致处理较为繁琐。同时新系统、跨环境也会存在多种不同文件格式或数据格式的日志文件，随着对日志文件中的数据进行处理，比如日志数据中的信息新增，需要新增字段信息，需要底层重新开放或重新解析等，均会导致日志文件处理较为繁琐。此外，由于业务变化较快，需要不断的修改数据处理逻辑，才能满足业务需求，也会给日志文件处理造成麻烦。因此，需要提供一种日志文件处理方法以解决上述问题。

发明内容

本申请提供了一种日志文件处理方法、装置、计算机设备及存储介质，旨在提高日志文件的处理速度，同时降低开发人员的工作量。

本申请提供了一种日志文件处理方法，其包括：

获取应用程序产生的日志文件，识别所述日志文件对应的文件格式；

根据文件格式和文件解析规则之间预设的对应关系，确定识别到的文件格式对应的文件解析规则；

根据确定的文件解析规则解析所述日志文件以得到统一编码规范文件，通过预设文本分析规则分析所述统一编码规范文件以获取日志字段；

根据所述日志字段生成数据维度统计表，并将所述数据维度统计表与历史的数据维度统计表作比对以获取差异信息；

根据所述差异信息生成告警信息，并输出所述告警信息。

本申请提供了一种日志文件处理装置，其包括：

获取识别单元，用于获取应用程序产生的日志文件，识别所述日志文件对应的文件格式；

规则确定单元，用于根据文件格式和文件解析规则之间预设的对应关系，确定识别到的文件格式对应的文件解析规则；

解析分析单元，用于根据确定的文件解析规则解析所述日志文件以得到统一编码规范文件，通过预设文本分析规则分析所述统一编码规范文件以获取日志字段；

生成比对单元，用于根据所述日志字段生成数据维度统计表，并将所述数据维度统计表与历史的数据维度统计表作比对以获取差异信息；

生成输出单元，用于根据所述差异信息生成告警信息，并输出所述告警信息。

本申请还提供了一种计算机设备，其包括存储器、处理器及存储在所述存储器上并可在所述处理器上运行的计算机程序，所述处理器执行所述程序时实现本申请提供的任意一项所述的日志文件处理方法的步骤。

本申请还提供了一种计算机存储介质，其中所述计算机存储介质存储有计算机程序，所述计算机程序被处理器执行时使所述处理器执行本申请提供的任意实施例所述的日志文件处理方法的步骤。