[发明专利]镜像下载方法和装置有效
申请号: | 201810256195.4 | 申请日: | 2018-03-27 |
公开(公告)号: | CN110198330B | 公开(公告)日: | 2022-03-22 |
发明(设计)人: | 利开园;刘延春;柳继委 | 申请(专利权)人: | 腾讯科技(深圳)有限公司 |
主分类号: | H04L67/06 | 分类号: | H04L67/06;H04L67/1074;H04L67/561;H04L67/1097 |
代理公司: | 北京励诚知识产权代理有限公司 11647 | 代理人: | 贾玉姣 |
地址: | 518057 广东省深圳*** | 国省代码: | 广东;44 |
权利要求书: | 查看更多 | 说明书: | 查看更多 |
摘要: | |||
搜索关键词: | 下载 方法 装置 | ||
本发明提出一种镜像下载方法和装置,其中,方法包括:从元数据服务器下载镜像元数据以及镜像中每个层文件的哈希值;根据待下载的每个层文件的哈希值查询跟踪服务器预存的哈希值与节点标识的对应关系,确定与每个层文件对应的第一下载节点集合,其中,第一下载节点集合是用于向下载客户端提供层文件数据的其他客户端集合;将每个层文件分成多个数据块,并行下载多个数据块,其中,第二下载节点集合是从分布式存储中获取所有层文件数据的服务器集合;将镜像元数据和下载的所有层文件数据导入到容器中完成镜像下载。由此,丰富了镜像下载的节点种类,提高了镜像并发下载能力和效率。
技术领域
本发明涉及计算机技术领域,尤其涉及一种镜像下载方法和装置。
背景技术
目前,镜像由镜像元数据和层文件组成,为容器提供了应用程序的运行文件和配置环境,在容器运行之前,需要将镜像的元数据和层文件下载提前下载到宿主机上。其中,相关云平台将应用运行依赖环境保存到镜像中,大量的扩容和发布流程都需要下载镜像,镜像分发的效率直接影响到云平台的服务质量。
相关技术中,使用Docker Registry方式下载镜像,在这种下载方式中,宿主机集群从专用私有的Docker Registry服务下载镜像。Registry服务提供了镜像上传和下载的API,宿主机的Docker客户端在镜像下载时,先从Registry服务获取镜像元数据及层文件列表,然后分别下载每一个本地不存在的层文件。然而,这种下载方式中,当大量宿主机同时从Registry下载镜像时,Registry服务会成为镜像分发的瓶颈,镜像层文件的传输速度较低,并发下载能力差。
发明内容
本发明提供一种镜像下载方法和装置,以解决现有技术中,镜像并发下载能力差且效率低的技术问题。
本发明第一实施例提供一种镜像下载方法,包括以下步骤:从元数据服务器下载镜像元数据以及镜像中每个层文件的哈希值;根据待下载的每个层文件的哈希值查询跟踪服务器预存的哈希值与节点标识的对应关系,确定与每个层文件对应的第一下载节点集合,其中,所述第一下载节点集合是用于向下载客户端提供层文件数据的其他客户端集合;将每个层文件分成多个数据块,根据与每个层文件对应的第一下载节点集合以及存储所有层文件数据的第二下载节点集合,并行下载所述多个数据块,其中,所述第二下载节点集合是从分布式存储中获取所有层文件数据的服务器集合;将所述镜像元数据和下载的所有层文件数据导入到容器中完成镜像下载。
本发明第二实施例提供一种镜像下载装置,包括:下载模块,用于从元数据服务器下载镜像元数据以及镜像中每个层文件的哈希值;第一确定模块,用于根据待下载的每个层文件的哈希值查询跟踪服务器预存的哈希值与节点标识的对应关系,确定与每个层文件对应的第一下载节点集合,其中,所述第一下载节点集合是用于向下载客户端提供层文件数据的其他客户端集合;并行下载模块,用于将每个层文件分成多个数据块,根据与每个层文件对应的第一下载节点集合以及存储所有层文件数据的第二下载节点集合,并行下载所述多个数据块,其中,所述第二下载节点集合是从分布式存储中获取所有层文件数据的服务器集合;导入模块,用于将所述镜像元数据和下载的所有层文件数据导入到容器中完成镜像下载。
本发明第三实施例提供一种计算机设备,包括:存储器、处理器及存储在存储器上并可在处理器上运行的计算机程序,所述处理器执行所述计算机程序时,实现如上述实施例所述的镜像下载方法。
本发明第四实施例提供一种非临时性计算机可读存储介质,其上存储有计算机程序,所述计算机程序被处理器执行时实现如上述实施例所述的镜像下载方法。
本发明实施例提供的技术方案可以包括以下有益效果:
该专利技术资料仅供研究查看技术是否侵权等信息,商用须获得专利权人授权。该专利全部权利属于腾讯科技(深圳)有限公司,未经腾讯科技(深圳)有限公司许可,擅自商用是侵权行为。如果您想购买此专利、获得商业授权和技术合作,请联系【客服】
本文链接:http://www.vipzhuanli.com/pat/books/201810256195.4/2.html,转载请声明来源钻瓜专利网。