[发明专利]日志存储优化方法和设备

摘要

本公开的实施例涉及一种日志存储优化方法和设备，所述方法包括：接收日志数据；使用解析规则将该日志数据转换为结构化数据；以及对该结构化数据进行编码，以减少日志的存储空间。本公开的实施例通过对日志记录进行结构化转换和对转换后的数据进行压缩编码，能够减少日志的存储空间并且提高日志的分析效率。

主权项

1.一种日志存储优化方法，包括：/n接收日志数据；/n使用解析规则将所述日志数据转换为结构化数据；以及/n对所述结构化数据进行编码，以减少日志数据的存储空间，/n其中使用解析规则将所述日志数据转换为结构化数据包括：/n在使用所述解析规则将所述日志数据转换为所述结构化数据之后，设定基准时间；/n确定每条日志的时间戳与所述基准时间之间的时间差；以及/n利用所述时间差来替代所述结构化数据中的所述时间戳，/n并且其中所述方法还包括：/n遍历结构化日志简档储存库，所述结构化日志简档储存库 用于以向量的形式存储经转换的所述结构化数据；/n确定所述结构化日志简档储存库 中是否包括对应于所述日志数据的结构化日志简档；/n响应于所述结构化日志简档储存库包括对应于所述日志数据的结构化日志简档，根据对应的所述结构化日志简档来生成对应的解析规则；以及/n响应于所述结构化日志简档储存库不包括对应于所述日志数据的结构化日志简档，通过自适应学习过程来获得对应于所述日志数据的所述结构化日志简档和所述解析规则，所述自适应学习过程基于历史的日志记录和日志简档而被训练。/n