[发明专利]日志存储方法、日志检索方法、装置、设备及存储介质在审
申请号: | 202210660343.5 | 申请日: | 2022-06-10 |
公开(公告)号: | CN115061990A | 公开(公告)日: | 2022-09-16 |
发明(设计)人: | 吴光华 | 申请(专利权)人: | 金蝶软件(中国)有限公司 |
主分类号: | G06F16/18 | 分类号: | G06F16/18;G06F16/172;G06F16/13;G06F40/284;G06F40/242 |
代理公司: | 广州三环专利商标代理有限公司 44202 | 代理人: | 颜希文 |
地址: | 518000 广东省深圳市南山区*** | 国省代码: | 广东;44 |
权利要求书: | 查看更多 | 说明书: | 查看更多 |
摘要: | |||
搜索关键词: | 日志 存储 方法 检索 装置 设备 介质 | ||
1.一种日志存储方法,其特征在于,包括:
获取词汇信息与日志标识之间的第一对应关系,所述词汇信息为对日志记录进行分词得到,所述日志标识为所述日志记录的标识信息;
根据所述第一对应关系,将所述日志记录持久化到目标存储空间,所述目标存储空间包括目标索引文件和日志文件,所述目标索引文件存储有所述第一对应关系,所述日志文件存储有所述日志记录。
2.如权利要求1所述的日志存储方法,其特征在于,所述获取词汇信息与日志标识之间的第一对应关系,包括:
建立所述日志标识与序列标识之间的第二对应关系,所述序列标识为日志流的标识信息,所述日志流包括多个日志记录;
对所述日志记录进行分词,得到多个词汇信息;
根据所述词汇信息和所述第二对应关系,生成词典倒排表,所述词典倒排表存储有所述第一对应关系。
3.如权利要求2所述的日志存储方法,其特征在于,所述建立所述日志标识与序列标识之间的第二对应关系,包括:
对所述日志流的第一标签信息进行哈希运算,得到所述日志流的序列标识;
将所述序列标识和所述日志标识添加至预设序列表,生成内存序列表,所述内存序列表存储有所述第二对应关系。
4.如权利要求1所述的日志存储方法,其特征在于,所述方法,还包括:
获取第二标签信息与序列标识之间的第三对应关系,所述第二标签信息为所述日志记录的标签信息,所述序列标识为日志流的标识信息,所述目标索引文件还存储有所述第三对应关系。
5.如权利要求1所述的日志存储方法,其特征在于,所述根据所述第一对应关系,将所述日志记录持久化到目标存储空间,包括:
根据所述第一对应关系,将所述日志记录中的内容信息存储至所述日志文件,并生成所述日志文件的内容表,内容表存储有所述日志标识与所述日志文件的第一文件偏移量之间的第四对应关系;
根据所述词汇信息和所述日志标识,生成所述目标索引文件。
6.如权利要求5所述的日志存储方法,其特征在于,所述目标索引文件包括时序子文件和索引子文件,所述根据所述词汇信息和所述日志标识,生成所述目标索引文件,包括:
根据所述日志记录中的时间戳和所述日志标识,生成所述时序子文件;
建立所述词汇信息与所述时序子文件的第二文件偏移量之间的第五对应关系,得到所述索引子文件。
7.如权利要求6所述的日志存储方法,其特征在于,所述根据所述日志记录中的时间戳和所述日志标识,生成所述时序子文件,包括:
建立所述日志记录中的时间戳与所述日志标识之间的第六对应关系,得到区块子文件;
建立所述区块子文件中的时间窗口与所述区块子文件的第三文件偏移量之间的第七对应关系,得到所述时序子文件。
8.如权利要求6所述的日志存储方法,其特征在于,所述索引子文件还存储有所述日志记录的第二标签信息与所述时序子文件的第二文件偏移量之间的第六对应关系。
9.一种日志检索方法,其特征在于,包括:
获取待检索信息,所述待检索信息包括第二标签信息或全文信息,所述全文信息包括词汇信息;
基于所述待检索信息,对目标存储空间进行日志检索,得到所述待检索信息对应的目标日志记录,所述目标存储空间包括目标索引文件和日志文件,所述目标索引文件存储有所述待检索信息与所述日志标识之间对应关系,所述日志文件存储有所述日志标识对应的内容信息。
10.一种日志存储装置,其特征在于,包括:
第一获取模块,用于获取词汇信息与日志标识之间的第一对应关系,所述词汇信息为对日志记录进行分词得到,所述日志标识为所述日志记录的标识信息;
持久化模块,用于根据所述第一对应关系,将所述日志记录持久化到目标存储空间,所述目标存储空间包括目标索引文件和日志文件,所述目标索引文件存储有所述第一对应关系,所述日志文件存储有所述日志记录。
该专利技术资料仅供研究查看技术是否侵权等信息,商用须获得专利权人授权。该专利全部权利属于金蝶软件(中国)有限公司,未经金蝶软件(中国)有限公司许可,擅自商用是侵权行为。如果您想购买此专利、获得商业授权和技术合作,请联系【客服】
本文链接:http://www.vipzhuanli.com/pat/books/202210660343.5/1.html,转载请声明来源钻瓜专利网。