[发明专利]为应用部署分布式容器集群且执行该应用的方法和装置

说明书

根据本发明，提出了一种为应用部署分布式容器集群且执行该应用的方法，包括：根据该应用的处理平台、数据源、资源密集类型、以及所需的容器数量，为该应用建立镜像；反复执行以下容器部署过程，直到达到所需的容器数量为止，由此在物理节点上部署针对该应用的分布式容器集群：根据各物理节点的资源使用状况、该应用的所述资源密集类型、以及物理节点上已部署的容器数，计算各物理节点的用于容器部署的权重值，并选择用于容器部署的权重值最大的物理节点来部署容器；以及在所部署的所述分布式容器集群的各容器中，利用所述镜像启动该应用的所述处理平台并从所述数据源读取所需处理的数据，以执行该应用。

技术领域

本发明涉及计算机技术领域，具体而言，本发明涉及一种为应用部署分布式容器集群且执行该应用的方法和装置，能够基于容器技术在大数据计算中实现计算资源的动态分配和回收。

背景技术

Docker是一个开源的应用容器引擎，基于Go语言开发并遵从Apache2.0协议开源。Docker可以让开发者打包他们的应用以及依赖包到一个轻量级、可移植的容器中，然后发布到任何流行的Linux机器上，也可以实现虚拟化。容器完全使用沙箱机制，相互之间不会有任何接口，容器之间隔离性极好。基于命名空间(namespace)隔离技术，每个容器都拥有自己独立的UTS(UNIX Time-sharing System)，IPC(Inter-Process Communication)，PID进程，网络，和Mount文件系统，互不干扰。更重要的是容器性能开销极低，由于其轻量级虚拟化的特点，Docker相比传统的虚拟机最明显的特点就是启动快，资源占用小，因此被广泛用于构建隔离的标准化的运行环境，构建自动化测试和持续集成环境，以及一切可以横向扩展的应用。

现有技术(中国专利公开号：CN 104951360 A)提出了一种基于Docker的配置管理方式，通过获取Docker运行环境中的多个容器的配置需求，确定相应的底层系统命令，进而对Docker运行环境中的多个容器进行配置管理。

上述现有技术中，只针对容器本身的配置进行管理，并没有考虑在大数据集群运行环境下容器的动态分配和使用后对容器所占用资源的及时回收问题。

发明内容

为了克服现有技术的上述缺陷提出了本发明。因此，本发明的目的之一是提出一种为应用部署分布式容器集群且执行该应用的方法和装置，能够基于容器技术在大数据计算中实现计算资源的动态分配和回收。

根据本发明，提出了一种为应用部署分布式容器集群且执行该应用的方法，包括：根据该应用的处理平台、数据源、资源密集类型、以及所需的容器数量，为该应用建立镜像；反复执行以下容器部署过程，直到达到所需的容器数量为止，由此在物理节点上部署针对该应用的分布式容器集群：根据各物理节点的资源使用状况、该应用的所述资源密集类型、以及物理节点上已部署的容器数，计算各物理节点的用于容器部署的权重值，并选择用于容器部署的权重值最大的物理节点来部署容器；以及在所部署的所述分布式容器集群的各容器中，利用所述镜像启动该应用的所述处理平台并从所述数据源读取所需处理的数据，以执行该应用。

优选地，所述方法还包括：将在所部署的所述分布式容器集群的各容器中执行该应用后的结果输出给用户。

优选地，所述方法还包括：在应用执行完毕后，在物理节点上停止并销毁所部署的容器，并释放所述容器所占的资源。

优选地，所述资源使用状况包括：CPU、内存和磁盘的使用状况，所述资源密集类型包括：CPU密集型、内存密集型和磁盘密集型。