[发明专利]一种日志的监控方法及装置

说明书

本发明公开了一种日志的监控方法及装置，涉及数据处理技术领域，为解决现有的使用的日志数据为从多种途径获取的，从而导致的日志数据的准确性较低的问题。本发明的方法包括：获取原始日志数据；确定待监控关键词；统计所述待监控关键词在所述原始日志数据中对应的频率值；根据所述频率值判断所述待监控关键词是否存在异常；若是，则输出告警信息。本发明适合应用在对日志数据的监控。

技术领域

本发明涉及数据处理技术领域，尤其涉及一种日志的监控方法及装置。

背景技术

随着网络技术的不断发展，网络在生活中的应用也越来越广泛。通常情况下，网络运行过程中会产生大量的日志数据，而通过对日志的监控可以检测到异常数据，并根据异常数据查找推测可能存在的故障，因此确保日志数据的准确性和有效性至关重要。

然而，现有技术中通常是通过多种途径获取日志数据，由于用于采集日志的数据采集端较多，采集端的版本也很多，并且将采集到的这些数据直接汇总在数据处理端进行处理使用，因此无法保证使用的日志数据的准确性。

发明内容

鉴于上述问题，本发明提供一种日志的监控方法及装置，主要目的在于通过在原始日志数据中对待监控关键词进行监控，以提高日志数据的准确性。

为解决上述技术问题，第一方面，本发明提供了一种日志的监控方法，该方法包括：

获取原始日志数据；

确定待监控关键词；

统计所述待监控关键词在所述原始日志数据中对应的频率值；

根据所述频率值判断所述待监控关键词是否存在异常；

若是，则输出告警信息。

可选的，所述方法还包括：

获取多条历史日志数据；

从所述历史日志数据中提取多个关键词，并统计每个所述关键词在各条所述历史日志数据中分别对应的频率值；

当所述关键词在所述各条所述历史日志数据中对应的频率值均不低于第一预设频率阈值且不超过第二预设频率阈值时，提取所述关键词，得到有效关键词。

可选的，所述方法还包括：

计算所述各个有效关键词的平均频率值；

根据所述各个有效关键词在各条所述历史日志数据中的频率值，提取与所述平均频率值相差最大的最大波动频率值；

利用所述最大波动频率值与所述平均频率值之间的差值除以所述平均频率值，得到与所述各个有效关键词对应的波动范围；

根据所述平均频率值和所述波动范围，计算与所述各个有效关键词分别对应的频率值范围。

可选的，所述根据所述频率值判断所述待监控关键词是否存在异常包括：

提取与所述待监控关键词对应的所述有效关键词；

检测所述待监控关键词的频率值是否在所述有效关键词的频率值范围内；

若是，则判断所述待监控关键词不存在异常；

否则，判断所述待监控关键存在异常。

可选的，所述方法还包括：

按照预置时间间隔对所述有效关键词进行更新。

第二方面，本发明还提供了一种日志的监控装置，该装置包括：

获取单元，用于获取原始日志数据；

确定单元，用于确定待监控关键词；