[发明专利]一种面向海洋大数据集群的日志存储方法及系统在审
申请号: | 201910032045.X | 申请日: | 2019-01-14 |
公开(公告)号: | CN109885544A | 公开(公告)日: | 2019-06-14 |
发明(设计)人: | 杨永全;邢彪;魏志强 | 申请(专利权)人: | 中国海洋大学 |
主分类号: | G06F16/18 | 分类号: | G06F16/18;G06F16/174;G06F16/16;G06F16/13 |
代理公司: | 北京工信联合知识产权代理有限公司 11266 | 代理人: | 姜丽楼 |
地址: | 266100 山*** | 国省代码: | 山东;37 |
权利要求书: | 查看更多 | 说明书: | 查看更多 |
摘要: | 本发明公开了一种面向海洋大数据集群的日志存储方法及系统,方法包括:获取与海洋大数据集群相关联的本地日志,通过解析获取关键数据,关键数据包括:服务器运行状态及资源使用情况、服务器当前任务执行情况、服务器历史任务执行情况以及报警信息文本或个数;对本地日志中的每条日志进行分析,以确定每条日志的存储类型;为删除型的每条日志设置删除期限,将在删除期限期满时仍符合删除条件的日志进行删除;设置压缩处理周期,并且每当日志存储系统运行时间达到压缩处理周期时,对日志存储系统中压缩型的每条日志进行压缩,并将经过压缩的日志移动到日志存储系统的历史存储区中;接收针对于日志的查询请求,确定查询请求所涉及的日志的类型。 | ||
搜索关键词: | 日志 日志存储系统 删除 大数据 集群 查询请求 关键数据 任务执行 日志存储 压缩处理 服务器 海洋 服务器运行状态 历史存储区 报警信息 存储类型 删除条件 资源使用 压缩 压缩型 期限 解析 期满 文本 关联 移动 分析 | ||
【主权项】:
1.一种面向海洋大数据集群的日志存储方法,所述方法包括:获取与海洋大数据集群相关联的本地日志,对所述本地日志进行解析以获取关键数据,所述关键数据包括:服务器运行状态及资源使用情况、服务器当前任务执行情况、服务器历史任务执行情况以及报警信息文本或个数;对本地日志中的每条日志进行分析,以确定每条日志的存储类型,所述存储类型包括:删除型、压缩型以及常用型;为删除型的每条日志设置删除期限,将在删除期限期满时仍符合删除条件的日志进行删除;设置压缩处理周期,并且每当日志存储系统运行时间达到压缩处理周期时,对日志存储系统中压缩型的每条日志进行压缩,并将经过压缩的日志移动到日志存储系统的历史存储区中;接收针对于日志的查询请求,确定所述查询请求所涉及的日志的类型;如果是压缩型,则从历史存储区中读取;如果是常用型,则从日志存储系统的常规存储区中读取。
下载完整专利技术内容需要扣除积分,VIP会员可以免费下载。
该专利技术资料仅供研究查看技术是否侵权等信息,商用须获得专利权人授权。该专利全部权利属于中国海洋大学,未经中国海洋大学许可,擅自商用是侵权行为。如果您想购买此专利、获得商业授权和技术合作,请联系【客服】
本文链接:http://www.vipzhuanli.com/patent/201910032045.X/,转载请声明来源钻瓜专利网。
- 上一篇:基于大数据集群的日志处理方法及装置
- 下一篇:存储、查询日志信息的方法、装置