[发明专利]一种服务器日志查询提取的方法及装置

说明书

本申请公开一种服务器日志查询提取的方法及装置，该方包括：接收携带查询关键字信息和查询范围信息的日志查询命令信息，转换为日志查询指令写入指令集；启用定时任务识别并执行指令集中的日志查询指令，生成对应的查询日志收集脚本；根据查询关键字信息和查询范围信息查询并提取服务器上的目标日志；根据服务器识别标识将目标日志写入日志接收文件夹中；执行完指令集时，生成查询日志对应的完结标识添加至共享文件夹中；根据查询关键字信息和查询范围信息从各个日志接收文件夹中获取目标日志，合并得到查询日志集。本发明极大地节省了服务器日志提取所需要的时间和成本。

技术领域

本发明涉及服务器日志查询的技术领域，更具体地，涉及一种服务器日志查询提取的方法及装置。

背景技术

随着网站、应用访问量和使用量的增加，网站或者应用自身的许多问题和缺陷(俗称bug)都会暴露出来，而若不及时解决这些bug，就会造成应用或者网站的流量流失、评价降低。现阶段，主要靠运维人员查找和解决这些问题与缺陷。通过精确和快速的查找应用日志来帮助开发定位、分析问题是运维人员的主要工作之一。

但是，随着业务量的增加、功能复杂性增强，现在大部分公司都采用了服务器集群，负载均衡等来分摊单个服务器的访问压力，同一套服务器的日志可能要分布在几台，甚至几十台的服务器上。此时，要通过运维人员手工拉取的方式来获取日志，就会花费大量的时间成本与人力成本。

而通过脚本采集服务器日志的方式相对于上述的人工拉取方式，会极大地降低时间成本与人力成本。一般地，日志提取会在某个服务器放置采集日志的脚本，并通过远程登录的方式登录其它的服务器进行日志的采集工作。这种方式问题在于：安全性不足，实现起来有瓶颈：远程登录需要知道登录密码，而出于安全性考虑，服务器的登录密码在很多公司都是常变和保密的。运行条件苛刻：日志采集工作集中在一台服务器上，对服务器的性能有较高的要求。在现有日志分析技术中，最具有代表性的要属(Elasticsearch+Logstash+Kibana)ELK日志分析平台，是一套开源的日志管理方案，Logstash负责日志的收集、处理和储存；Elasticsearch负责日志检索和分析；Kibana负责日志的可视化。但是，这个平台存在两个客观缺点：第一：Logstash耗资源较大，运行占用较高的CPU和内存；第二：Logstash需要存储经过处理的日志，然后等待日志检索和分析，存储本身会占用服务器较大内存。

因此，提供一种消耗资源少、节省服务器日志提取时间和成本的服务器日志查询提取方案是本领域亟待解决的技术问题。

发明内容

有鉴于此，本发明提供了一种服务器日志查询提取的方法及装置，解决了现有技术中查询提取服务器日志资源消耗多，服务器日志提取时间长和成本高的技术问题。

为了解决上述技术问题，本发明提出一种服务器日志查询提取的方法，包括：

在服务器上设置共享文件夹，在所述共享文件夹上部署日志收集脚本，根据所述服务器识别标识在所述共享文件夹中创建日志接收文件夹；在所述服务器上添加定时执行日志收集脚本的定时任务，在所述服务器上部署供所述定时任务执行的指令集；

接收客户端输入的携带查询关键字信息和查询范围信息的日志查询命令信息，将所述日志查询命令信息转换为日志查询指令写入所述指令集；启用所述定时任务识别并执行所述指令集中的所述日志查询指令，生成对应的查询日志收集脚本；

在所述查询日志收集脚本未存在进程，且所述共享文件夹中无所述查询日志对应的完结标识时，根据所述查询关键字信息和查询范围信息查询并提取所述服务器上的目标日志；根据所述服务器识别标识将所述目标日志写入所述日志接收文件夹中；执行完所述指令集时，生成查询日志对应的完结标识添加至所述共享文件夹中；

根据所述查询关键字信息和查询范围信息从各个所述日志接收文件夹中获取所述目标日志，合并得到查询日志集。