[发明专利]基于负载均衡的分布式存储大数据迁移系统在审
申请号: | 201711235235.9 | 申请日: | 2017-12-01 |
公开(公告)号: | CN110019107A | 公开(公告)日: | 2019-07-16 |
发明(设计)人: | 周峻松;徐继峰;祁建明;陈墩金 | 申请(专利权)人: | 广州明领基因科技有限公司 |
主分类号: | G06F16/185 | 分类号: | G06F16/185;G06F16/182 |
代理公司: | 暂无信息 | 代理人: | 暂无信息 |
地址: | 510610 广东省广州市天河区*** | 国省代码: | 广东;44 |
权利要求书: | 查看更多 | 说明书: | 查看更多 |
摘要: | 本发明公开了一种基于负载均衡的分布式存储大数据迁移系统,该系统包括:数据源层、作业调度层以及迁移目标层;其中,所述数据源层用于为所述作业调度层提供作业数据;所述作业调度层负责根据需求完成数据的迁移,将数据迁移至所述迁移目标层。本发明方案采用三层系统结构,在作业调度层利用Astraea近似求解算法,通过调控迁移任务的执行顺序使得包含同一数据源的作业尽可能避免在同一时间执行,尽量错开了迁移时的数据访问热点问题,提高了迁移任务的并行性,改善了迁移效率。 | ||
搜索关键词: | 作业调度 迁移 分布式存储 负载均衡 迁移目标 迁移系统 数据源层 大数据 求解算法 热点问题 三层系统 数据访问 数据迁移 同一数据 作业数据 并行性 错开 近似 调控 | ||
【主权项】:
1.基于负载均衡的分布式存储大数据迁移系统,其特征在于,所述系统包括:数据源层、作业调度层以及迁移目标层;其中,所述数据源层用于为所述作业调度层提供作业数据;所述作业调度层负责根据需求完成数据的迁移,将数据迁移至所述迁移目标层。
下载完整专利技术内容需要扣除积分,VIP会员可以免费下载。
该专利技术资料仅供研究查看技术是否侵权等信息,商用须获得专利权人授权。该专利全部权利属于广州明领基因科技有限公司,未经广州明领基因科技有限公司许可,擅自商用是侵权行为。如果您想购买此专利、获得商业授权和技术合作,请联系【客服】
本文链接:http://www.vipzhuanli.com/patent/201711235235.9/,转载请声明来源钻瓜专利网。