[发明专利]一种基于列式存储的获取日志信息的方法及装置有效
申请号: | 201810050152.0 | 申请日: | 2018-01-18 |
公开(公告)号: | CN108345648B | 公开(公告)日: | 2021-01-26 |
发明(设计)人: | 王凯峰;王俏;王天凤 | 申请(专利权)人: | 奇安信科技集团股份有限公司 |
主分类号: | G06F16/2453 | 分类号: | G06F16/2453;G06F16/2455;G06F16/22 |
代理公司: | 北京路浩知识产权代理有限公司 11002 | 代理人: | 王莹;李相雨 |
地址: | 100088 北京市西城区*** | 国省代码: | 北京;11 |
权利要求书: | 查看更多 | 说明书: | 查看更多 |
摘要: | |||
搜索关键词: | 一种 基于 存储 获取 日志 信息 方法 装置 | ||
1.一种基于列式存储的获取日志信息的方法,其特征在于,包括:
解析数据查询语句,以获取解析结果,所述解析结果包括数据地址、数据调用接口,以及逻辑运算标识;其中,所述数据查询语句对应待查询的数据是基于列式存储的;
将所述数据地址、所述数据调用接口,以及所述逻辑运算标识转换为目标查询语句;
根据所述目标查询语句读取所述数据,以获取日志信息;
其中,所述根据所述目标查询语句读取所述数据,以获取日志信息,包括:
根据所述目标查询语句异步读取所述数据,以获取日志信息;
所述根据所述目标查询语句异步读取所述数据,以获取日志信息,包括:使用第一块内存缓存读取所述数据,同时第二块内存缓存对预先读取到的数据进行数据匹配计算;
若第一块内存缓存已满,且第二块内存缓存中的数据匹配计算尚未结束,则使第一块内存缓存处于等待状态;
待第二块内存缓存完成数据匹配计算时,将已满的第一块内存缓存与完成数据匹配计算的第二块内存缓存进行交换,以使完成数据匹配计算的第二块内存缓存清空缓存,并继续读取所述数据,同时第一块内存缓存对已读取的数据进行数据匹配计算;
若第二块内存缓存已满,且第一块内存缓存中的数据匹配计算尚未结束,则使第二块内存缓存处于等待状态;
待第一块内存缓存完成数据匹配计算时,将已满的第二块内存缓存与完成数据匹配计算的第一块内存缓存进行交换,以使完成数据匹配计算的第一块内存缓存清空缓存,并继续使用第一块内存缓存读取所述数据,直到完成全部数据的异步读取,并获取所述日志信息。
2.根据权利要求1所述的方法,其特征在于,所述目标查询语句包括C语言查询语句;相应的,所述将所述数据地址、所述数据调用接口,以及所述逻辑运算标识转换为目标查询语句,包括:
获取所述数据地址的地址类型;
将所述数据地址转换为包括有所述地址类型的对应于所述C语言查询语句的N进制数字;N为正整数;
将所述数据调用接口转换为对应于所述C语言查询语句的包括有指定字符的数据调用接口;
将所述逻辑运算标识转换为对应于所述C语言查询语句的逻辑运算符号。
3.根据权利要求2所述的方法,其特征在于,所述数据地址包括源数据地址和目的数据地址;相应的,所述将所述数据调用接口转换为对应于所述C语言查询语句的包括有指定字符的数据调用接口,包括:
将所述数据调用接口扩展为对应于所述源数据地址的源数据调用接口,以及对应于所述目的数据地址的目的数据调用接口;
分别将所述源数据调用接口,以及所述目的数据调用接口转换为对应于所述C语言查询语句的包括有指定字符的数据调用接口。
4.根据权利要求2所述的方法,其特征在于,所述地址类型包括网际协议版本IPv4和网际协议版本IPv6。
该专利技术资料仅供研究查看技术是否侵权等信息,商用须获得专利权人授权。该专利全部权利属于奇安信科技集团股份有限公司,未经奇安信科技集团股份有限公司许可,擅自商用是侵权行为。如果您想购买此专利、获得商业授权和技术合作,请联系【客服】
本文链接:http://www.vipzhuanli.com/pat/books/201810050152.0/1.html,转载请声明来源钻瓜专利网。