[发明专利]一种批量文件的迁移方法及装置

权利要求书

1.一种批量文件的迁移方法，其特征在于，包括：

将源文件存储至关系型数据库中；

根据所述源文件的全局文件数据库ID号及时间戳，将所述关系型数据库中的文件列表插入至分布式缓存队列中；

根据所述分布式缓存队列生成所述源文件的映射表；

根据所述映射表将所述源文件进行迁移。

2.如权利要求1所述的批量文件的迁移方法，其特征在于，所述根据所述源文件的全局文件数据库ID号及时间戳，将所述关系型数据库中的文件列表插入至分布式缓存队列中，包括：

根据所述全局文件数据库ID号及时间戳，将所述关系型数据库中的源文件进行排序；

将排序后的源文件对应的文件列表进行拆分；

将拆分后的文件列表插入至分布式缓存redis队列中。

3.如权利要求2所述的批量文件的迁移方法，其特征在于，所述根据所述分布式缓存队列生成所述源文件的映射表包括：

根据所述分布式缓存redis队列，生成所述源文件中多个子文件与所述多个子文件位置之间的映射表。

4.如权利要求3所述的批量文件的迁移方法，其特征在于，所述根据所述映射表将所述源文件进行迁移包括：

根据所述映射表以及所述源文件生成生产者队列；

当生产者队列长度大于0时，以多线程的方式将所述生产者队列写入至消费者队列中。

5.如权利要求4所述的批量文件的迁移方法，其特征在于，还包括：

当发生源文件迁移断点时，根据断点时间以及所述映射表确定发生断点的子文件；

删除消费者队列中的发生断点的子文件，并根据所述映射表以及所述源文件进行断点续传。

6.一种批量文件的迁移装置，其特征在于，包括：

源文件存储模块，用于将源文件存储至关系型数据库中；

文件列表插入模块，用于根据所述源文件的全局文件数据库ID号及时间戳，将所述关系型数据库中的文件列表插入至分布式缓存队列中；

映射表生成模块，用于根据所述分布式缓存队列生成所述源文件的映射表；

源文件迁移模块，用于根据所述映射表将所述源文件进行迁移。

7.如权利要求6所述的批量文件的迁移装置，其特征在于，所述文件列表插入模块包括：

源文件排序单元，用于根据所述全局文件数据库ID号及时间戳，将所述关系型数据库中的源文件进行排序；

文件列表拆分单元，用于将排序后的源文件对应的文件列表进行拆分；

文件列表插入单元，用于将拆分后的文件列表插入至分布式缓存redis队列中；

所述映射表生成模块包括：

映射表生成单元，用于根据所述分布式缓存redis队列，生成所述源文件中多个子文件与所述多个子文件位置之间的映射表。

8.如权利要求7所述的批量文件的迁移装置，其特征在于，所述源文件迁移模块包括：

生产者队列生成单元，用于根据所述映射表以及所述源文件生成生产者队列；

生产者队列写入单元，用于当生产者队列长度大于0时，以多线程的方式将所述生产者队列写入至消费者队列中；

所述的批量文件的迁移装置还包括：

子文件确定模块，用于当发生源文件迁移断点时，根据断点时间以及所述映射表确定发生断点的子文件；

源文件续传模块，用于删除消费者队列中的发生断点的子文件，并根据所述映射表以及所述源文件进行断点续传。

9.一种电子设备，包括存储器、处理器及存储在存储器上并可在处理器上运行的计算机程序，其特征在于，所述处理器执行所述程序时实现权利要求1至5任一项所述批量文件的迁移方法的步骤。

10.一种计算机可读存储介质，其上存储有计算机程序，其特征在于，该计算机程序被处理器执行时实现权利要求1至5任一项所述批量文件的迁移方法的步骤。