[发明专利]一种数据文件处理的方法及系统在审
申请号: | 202110246807.3 | 申请日: | 2021-03-05 |
公开(公告)号: | CN112835851A | 公开(公告)日: | 2021-05-25 |
发明(设计)人: | 王晟权;杨镇铭;解晓雨;马海;丁晓阳;史程;王湃;赵建军 | 申请(专利权)人: | 华录光存储研究院(大连)有限公司;中国华录集团有限公司 |
主分类号: | G06F16/11 | 分类号: | G06F16/11;G06F16/172;G06F16/18;G06F3/06 |
代理公司: | 大连至诚专利代理事务所(特殊普通合伙) 21242 | 代理人: | 杨威;杨爽 |
地址: | 116000 辽宁省大连市高*** | 国省代码: | 辽宁;21 |
权利要求书: | 查看更多 | 说明书: | 查看更多 |
摘要: | |||
搜索关键词: | 一种 数据文件 处理 方法 系统 | ||
1.一种数据文件处理的方法,用于客户端,其特征在于,包括:
调用服务器端提供的数据归档服务,启动归档任务;
基于所述数据归档服务中提供的执行策略,对所述归档任务进行设置,所述执行策略包括时间策略、存放路径策略和归档数据选择策略;
基于设置后的所述归档任务对待归档数据进行归档,形成归档数据;
将所述归档数据上传至所述服务器端的缓存存储器,使所述归档数据可经由所述服务器端迁移到与所述服务器端通信连接的光盘库中;
其中,所述归档数据上传至所述服务器端的缓存存储器的过程中还形成有临时记录文件,所述临时记录文件用于记录有所述归档数据上传过程中形成的文件或文件块的标记信息。
2.根据权利要求1所述的方法,其特征在于,将所述归档数据上传至所述服务器端的缓存存储器之后,还包括:
间隔预定时间后,基于所述归档任务对新的待归档数据进行归档,形成新的归档数据;
将所述新的归档数据上传至所述服务器端的缓存存储器中;
重复上述间隔预定时间后形成新的归档数据,到将所述新的归档数据上传至所述服务器端的缓存存储器中的步骤,直到上传完毕基于所述归档任务形成的全部归档数据。
3.根据权利要求1或2所述的方法,其特征在于,将所述归档数据上传至所述服务器端的缓存存储器,包括:
当所述归档数据上传过程中形成的文件需要分块上传时,每完成一个文件块的上传后,在所述临时记录文件中记录所述文件块的块信息,所述块信息包括uploadID信息和partNumber信息;
当所述归档数据上传过程中形成的文件不需要分块上传时,在一个文件上传完成后,在临时记录文件中记录所述文件的文件名信息;
遍历所述临时记录文件中的所述块信息和所述文件名信息,滤除与所述临时记录文件中记录的所述块信息和所述文件名信息对应的所述归档数据上传过程中形成的文件或文件块;
继续上传剩下的所述文件或文件块。
4.根据权利要求1或2所述的方法,其特征在于,所述归档数据中还包括执行本次所述归档任务时的所述客户端的系统信息文件,所述系统信息文件用于所述客户端的系统崩溃时,使所述客户端根据所述系统信息文件恢复到执行本次所述归档任务前的工作状态。
5.一种数据文件处理的方法,用于服务器端,其特征在于,包括:
响应客户端的调用,为所述客户端提供数据归档服务,使所述客户端根据所述数据归档服务启动归档任务,并使所述客户端基于所述数据归档服务中提供的执行策略设置其归档任务,所述执行策略包括时间策略、存放路径策略和归档数据选择策略;
通过缓存存储器接收所述客户端上传的归档数据;
将所述归档数据从所述缓存存储器中迁移到与所述服务器端通信连接的光盘库中;
其中,通过缓存存储器接收所述客户端上传的归档数据的过程中还形成有临时记录文件,所述临时记录文件用于记录有所述归档数据上传过程中形成的文件或文件块的标记信息。
6.根据权利要求5所述的方法,其特征在于,将所述归档数据从所述缓存存储器中迁移到与所述服务器端通信连接的光盘库中之前,还包括;
间隔预定时间后,通过所述缓存存储器再次接收所述客户端上传的新的归档数据;
重复上述再次接收的步骤,直到接收完基于所述归档任务形成的全部归档数据。
7.根据权利要求5或6所述的方法,其特征在于,将所述缓存存储器中的所述归档数据迁移到光盘库中,包括:
根据所述存放路径策略确定刻录所述归档数据的所述光盘库中的光盘匣;
通过所述服务器端与所述光盘库之间的高速数据链路将所述归档数据传输并刻录至所述光盘匣中的光盘上,其中,所述高速数据链路包括基于SAS接口的线缆或基于FDDI接口的光缆,所述光盘库为基于RAID读写管理的蓝光光盘库。
该专利技术资料仅供研究查看技术是否侵权等信息,商用须获得专利权人授权。该专利全部权利属于华录光存储研究院(大连)有限公司;中国华录集团有限公司,未经华录光存储研究院(大连)有限公司;中国华录集团有限公司许可,擅自商用是侵权行为。如果您想购买此专利、获得商业授权和技术合作,请联系【客服】
本文链接:http://www.vipzhuanli.com/pat/books/202110246807.3/1.html,转载请声明来源钻瓜专利网。