[发明专利]日志采集控制方法、装置、存储介质及服务器在审
申请号: | 202110292102.5 | 申请日: | 2021-03-18 |
公开(公告)号: | CN112988679A | 公开(公告)日: | 2021-06-18 |
发明(设计)人: | 罗昌成 | 申请(专利权)人: | 北京大米科技有限公司 |
主分类号: | G06F16/17 | 分类号: | G06F16/17;G06F9/50;G06F11/34 |
代理公司: | 北京恒博知识产权代理有限公司 11528 | 代理人: | 张晓芳 |
地址: | 100089 北京市海淀区*** | 国省代码: | 北京;11 |
权利要求书: | 查看更多 | 说明书: | 查看更多 |
摘要: | |||
搜索关键词: | 日志 采集 控制 方法 装置 存储 介质 服务器 | ||
1.一种日志采集控制方法,其特征在于,所述方法应用于部署有日志采集代理Flumeagent的服务器,所述方法包括:
监测所述服务器的处理器占用率;
在所述处理器占用率大于或等于预设占用率阈值时,延长所述Flume agent采集日志数据的第一时间间隔至第二时间间隔,以使所述Flume agent基于所述第二时间间隔采集所述日志数据。
2.根据权利要求1所述的方法,其特征在于,所述监测所述服务器的处理器占用率之前,还包括:
接收由控制台发送的针对所述服务器中的日志采集代理Flume agent的配置数据;其中,所述配置数据用于更新所述Flume agent的配置文件中拦截器的配置;
基于所述配置数据控制所述拦截器开启对所述Flume agent采集日志数据的时间间隔的监测操作。
3.根据权利要求1或2所述的方法,其特征在于,所述监测所述服务器的处理器占用率,包括:
基于预设时间间隔获取所述服务器中产生的事件Event数据;
分析所述Event数据得到所述处理器占用率。
4.根据权利要求1所述的方法,其特征在于,所述延长所述Flume agent采集日志数据的第一时间间隔至第二时间间隔,以使所述Flume agent基于所述第二时间间隔采集所述日志数据,包括:
通过所述Flume agent中的拦截器获取所述Flume agent采集日志数据的第一时间间隔;
根据所述处理器占用率和所述第一时间间隔确定所述第二时间间隔;
延长所述Flume agent采集日志数据的所述第一时间间隔至所述第二时间间隔。
5.根据权利要求1所述的方法,其特征在于,所述延长所述Flume agent采集日志数据的第一时间间隔至第二时间间隔,以使所述Flume agent基于所述第二时间间隔采集所述日志数据之后,还包括:
将通过所述Flume agent采集到的日志数据写入所述服务器对应的磁盘中;
在监测到所述服务器的处理器占用率小于所述预设占用率阈值时,将所述磁盘中的日志数据发送给中心服务器;其中,所述中心服务器用于管理所述部署有Flume agent的服务器上传的日志数据。
6.根据权利要求5所述的方法,其特征在于,所述将通过所述Flume agent采集到的日志数据写入所述服务器对应的磁盘中,包括:
在所述日志数据对应的数据量大于或等于预设数据量时,对所述日志数据进行归类处理得到日志文件;
将所述日志文件进行压缩处理后写入所述服务器对应的磁盘中。
7.根据权利要求1所述的方法,其特征在于,所述方法,还包括:
在所述处理器占用率小于预设占用率阈值时,将通过所述Flume agent采集到的日志数据发送给中心服务器。
8.一种日志采集控制装置,其特征在于,所述装置应用于部署有日志采集代理Flumeagent的服务器,所述装置包括:
监测模块,用于监测所述服务器的处理器占用率;
处理模块,用于在所述处理器占用率大于或等于预设占用率阈值时,延长所述Flumeagent采集日志数据的第一时间间隔至第二时间间隔,以使所述Flume agent基于所述第二时间间隔采集所述日志数据。
9.一种计算机存储介质,其特征在于,所述计算机存储介质存储有多条指令,所述指令适于由处理器加载并执行如权利要求1~7任意一项的方法步骤。
10.一种服务器,其特征在于,包括:处理器、存储器;其中,所述存储器存储有计算机程序,所述计算机程序适于由所述处理器加载并执行如权利要求1~7任意一项的方法步骤。
该专利技术资料仅供研究查看技术是否侵权等信息,商用须获得专利权人授权。该专利全部权利属于北京大米科技有限公司,未经北京大米科技有限公司许可,擅自商用是侵权行为。如果您想购买此专利、获得商业授权和技术合作,请联系【客服】
本文链接:http://www.vipzhuanli.com/pat/books/202110292102.5/1.html,转载请声明来源钻瓜专利网。