[发明专利]日志采集方法、装置、电子设备和计算机可读存储介质

说明书

本发明实施例提出一种日志采集方法、装置、电子设备和计算机可读存储介质，涉及计算机技术领域。该方法通过预先配置解析容器和采集容器，解析容器获取目标应用容器对应的日志采集配置信息，根据日志采集配置信息在第一容器组的第一指定目录下创建软链接，由于软链接指向目标应用容器的日志文件且解析容器和采集容器在一个容器组内可以共享目录，故采集容器通过读取第一指定目录下的软链接可以得到目标应用容器的日志文件。该方法通过配置的方式采集应用容器的日志文件，无需重启应用，也无需向应用Pod中注入边车容器，将应用日志的生命周期与应用的生命周期解耦，应用本身也无需增加额外资源消耗，最终实现应用日志数据的持久化存储和查询。

技术领域

本发明涉及计算机技术领域，具体而言，涉及一种日志采集方法、装置、电子设备和计算机可读存储介质。

背景技术

Kubernetes，简称K8s，是Google开源的一个生产级别的容器编排系统。在容器中，容器日志有两大类，一类是标准输出日志，一类是文本日志，其中，文本日志指的是存在于容器内部并且没有被重定向到标准输出的日志，这类日志无法通过Kubernates或docker提供的命令或者API（Application Programming Interface，应用程序接口）获取，标准输出日志指的是需要向外界输出的日志。

传统应用在容器化转型的过程中，仍然习惯于将应用日志写入指定路径的日志文件中，这类日志文件不能按照标准输出日志的采集方式进行采集。现有技术中，如果需要采集应用容器内指定路径的日志文件，通常是采用边车容器的方式，通过向应用所在容器组（Pod）中加入边车容器，边车容器共享应用容器目录的方式读取应用容器的日志文件，这种方式的缺点在于不够通用，不同应用容器可能需要挂载不同的边车容器，且边车容器本身需要消耗一定资源，当集群规模较大时，会消耗大量资源。

发明内容

有鉴于此，本发明的目的在于提供一种日志采集方法、装置、电子设备和计算机可读存储介质，以解决现有技术中通过额外注入边车容器对应用容器进行日志采集存在的消耗大量资源的问题。

为了实现上述目的，本发明实施例采用的技术方案如下：

第一方面，本发明提供一种日志采集方法，应用于Kubernetes集群中的每个物理节点，所述物理节点上运行有第一容器组和至少一个第二容器组，所述第一容器组中运行有预先配置的解析容器和采集容器，所述第二容器组中运行有至少一个应用容器；所述解析容器和所述采集容器共享所述第一容器组的所有目录；所述方法包括：

通过所述解析容器获取目标应用容器对应的日志采集配置信息，根据所述日志采集配置信息在所述第一容器组的第一指定目录下创建软链接；所述软链接指向所述目标应用容器的日志文件；

通过所述采集容器读取所述第一容器组的第一指定目录下的软链接，得到所述目标应用容器的日志文件。

在可选的实施方式中，所述日志采集配置信息包括所述目标应用容器的名称、应用标签和所述目标应用容器的日志文件在所述目标应用容器内的路径；

所述根据所述日志采集配置信息在所述第一容器组的第一指定目录下创建软链接，包括：

根据所述应用标签获取所述目标应用容器所在目标容器组的名称、命名空间和所述目标应用容器的标识；

根据所述目标应用容器的日志文件在所述目标应用容器内的路径，确定所述目标应用容器的日志文件在所述第一容器组内的路径，并获取所述目标应用容器的日志文件的标识；

根据所述目标容器组的名称、命名空间、所述目标应用容器的名称、所述目标应用容器的标识和所述目标应用容器的日志文件的标识在所述第一指定目录下创建软链接，并将所述软链接与所述目标应用容器的日志文件在所述第一容器组内的路径进行关联。

在可选的实施方式中，所述物理节点的根目录挂载到所述第一容器组的第二指定目录下；