[发明专利]一种日志查找的方法和装置

摘要

本申请提供一种日志查找的方法和装置，应用于网络节点。所述方法包括：收集单位时长内产生的日志文件生成日志文件集合；针对所述日志文件集合中，每一预设的时长周期内指定字段的字段取值均相同的日志文件分别进行汇聚，生成对应于各预设时长周期的若干汇聚子文件，并基于生成的所述若干汇聚子文件生成汇聚文件；当接收到针对指定时段内的目标日志的查找请求时，从所述索引信息中查找与所述指定时间段对应的索引字段；基于该索引字段记录的偏移值从所述汇聚文件内容中读取与该索引字段对应的汇聚子文件。采用本申请提供的技术方案，可以提高日志查找的效率。

主权项

1.一种日志查找的方法，其特征在于，包括：收集单位时长内产生的日志文件生成日志文件集合；针对所述日志文件集合中，每一预设的时长周期内指定字段的字段取值均相同的日志文件分别进行汇聚，生成对应于各预设时长周期的若干汇聚子文件，并基于生成的所述若干汇聚子文件生成汇聚文件；其中，所述汇聚文件包括索引信息，以及与所述索引信息对应的汇聚文件内容；所述索引信息包括若干个分别对应于各时长周期的索引字段；所述索引字段用于记录对应的时长周期内的汇聚子文件相对于所述汇聚文件内容的偏移值；所述汇聚文件内容由对应于各时长周期的汇聚子文件组成；当接收到针对指定时段内的目标日志的查找请求时，从所述索引信息中查找与所述指定时间段对应的索引字段；基于该索引字段记录的偏移值从所述汇聚文件内容中读取与该索引字段对应的汇聚子文件；所述指定字段预设了统计顺序，基于所述统计顺序，针对读取到的汇聚子文件中各指定字段的字段取值进行多级统计，包括：从所述指定时段内的若干汇聚子文件中依次读取目标汇聚子文件；根据该目标汇聚子文件中各日志的第一指定字段的字段取值，在与所述第一指定字段对应的第一结构数组记录的字段取值中，查找对应的字段取值；根据该目标汇聚子文件中各日志中记录的相同日志的数量，将与该字段取值对应的计数器进行累加，并基于该第一结构数组中预设的指针跳转至与第二指定字段对应的第二结构数组；根据该目标汇聚子文件中各日志的第二指定字段的字段取值，继续在与第二结构数组记录的字段取值中，查找对应的字段取值，并在第二结构数组记录的字段取值中查找到对应的字段取值时，根据该目标汇聚子文件中各日志记录的相同日志的数量，将与该字段取值对应的计数器进行累加，以此类推，直到该目标汇聚子文件中各日志的所有指定字段的字段取值，根据与其对应的结构数组，完成各指定字段的字段取值的统计；其中，所述各指定字段分别预设了对应的结构数组，所述结构数组中记录了对应的指定字段、所包含的若干种不同类型的字段取值、以及与各字段取值分别对应的计数器；对所述多级统计的统计结果进行排序。