[发明专利]一种云存储系统中大文件的处理方法及系统

权利要求书

1.一种云存储系统中大文件的处理方法，其特征在于，该方法包括：

确定目标文件的大小；

当目标文件的大小超过预设大小时，对所述目标文件进行分割，转换成一组片段对象和一个清单对象；

将所述一组片段对象和一个清单对象均上传到云存储系统中。

2.根据权利要求1所述的方法，其特征在于，将所述一组片段对象和一个清单对象均上传到云存储系统中，包括：

计算所述一组片段对象中各个片段的MD5校验值；

异步上传每个片段对象；

当所有片段对象均上传完毕时，计算整个目标文件的MD5校验值；

上传所述清单对象。

3.根据权利要求2所述的方法，其特征在于，所述上传所述清单对象，包括：

将所述一组片段对象中的所有信息序列化为JSON格式的字符串，作为所述清单对象的内容；

计算所述JSON格式的字符串的MD5校验值；

上传所述清单对象的内容。

4.根据权利要求3所述的方法，其特征在于，还包括：

从所述云存储系统中获取对象元数据；

当所述对象元数据为清单对象元数据时，解析JSON格式的片段对象信息；

下载所述JSON格式的片段对象信息中对应的所有片段对象；

将下载的所有片段对象合并成一个大文件。

5.根据权利要求4所述的方法，其特征在于，还包括：

校验磁盘上的文件的MD5校验值与上传时记录的整个文件的MD5校验值。

6.一种云存储系统中大文件的处理系统，其特征在于，该系统包括：

确定单元，用于确定目标文件的大小；

分割单元，用于当目标文件的大小超过预设大小时，对所述目标文件进行分割，转换成一组片段对象和一个清单对象；

上传单元，用于将所述一组片段对象和一个清单对象均上传到云存储系统中。

7.根据权利要求6所述的系统，其特征在于，所述上传单元包括：

第一计算单元，用于计算所述一组片段对象中各个片段的MD5校验值；

第一上传子单元，用于异步上传每个片段对象；

第二计算单元，用于当所有片段对象均上传完毕时，计算整个目标文件的MD5校验值；

第二上传子单元，用于上传所述清单对象。

8.根据权利要求7所述的系统，其特征在于，所述第二上传子单元包括：

序列化单元，用于将所述一组片段对象中的所有信息序列化为JSON格式的字符串，作为所述清单对象的内容；

第三计算单元，用于计算所述JSON格式的字符串的MD5校验值；

第三上传子单元，用于上传所述清单对象的内容。

9.根据权利要求8所述的系统，其特征在于，还包括：

获取单元，用于从所述云存储系统中获取对象元数据；

解析单元，用于当所述对象元数据为清单对象元数据时，解析JSON格式的片段对象信息；

下载单元，用于下载所述JSON格式的片段对象信息中对应的所有片段对象；

合并单元，用于将下载的所有片段对象合并成一个大文件。

10.根据权利要求9所述的系统，其特征在于，还包括：

校验单元，用于校验磁盘上的文件的MD5校验值与上传时记录的整个文件的MD5校验值。