[发明专利]服务器中的数据续传的处理方法及系统有效
申请号: | 201310741808.0 | 申请日: | 2013-12-27 |
公开(公告)号: | CN103701907A | 公开(公告)日: | 2014-04-02 |
发明(设计)人: | 于凤东;张磊;马一鸣 | 申请(专利权)人: | 乐视网信息技术(北京)股份有限公司 |
主分类号: | H04L29/08 | 分类号: | H04L29/08 |
代理公司: | 北京国昊天诚知识产权代理有限公司 11315 | 代理人: | 许志勇 |
地址: | 100089 北京市海淀区*** | 国省代码: | 北京;11 |
权利要求书: | 查看更多 | 说明书: | 查看更多 |
摘要: | |||
搜索关键词: | 服务器 中的 数据 处理 方法 系统 | ||
1.一种服务器中的数据续传的处理方法,其特征在于,包括以下步骤:
将所述数据文件放置于所对应的内部队列中;
取得所述内部队列中的数据文件并根据所述数据文件的文件大小决定切分数量,根据所述切分数量对所述数据文件进行切分,并得到多个切分片段;
由不同的工作线程读取所述多个切分片段,并根据预先创建的目标文件的文件头将读取的所述切分片段写入所述目标文件中对应的写入位置;
当发生写入异常时,根据每一个切分片段的写入进度创建对应的元数据文件,其中,所述元数据文件为包括当前写入位置或写入长度的文件;
当异常修复后并再次连线进行写入时,读取每一切分片段的元数据文件;以及
依据元数据文件所记录的位置开始写入至目标文件中。
2.如权利要求1所述的服务器中的数据续传的处理方法,其特征在于,所述根据所述切分数量对所述数据文件进行切分,并得到多个切分片段进一步包括:
所述根据所述切分数量对所述数据文件进行初始切分,得到多个初始切分片段及每个初始切分片段对应的切分点;
判断所述切分片段是否位于所述内部队列的尾端;
若所述切分点位于所述尾端之后,则延伸切分片段的长度,令所述数据文件的切分位置至所述切分点上;以及
若所述切分点位于所述尾端之前,则减缩切分片段的长度,令所述数据文件的切分位置至所述切分点上。
3.如权利要求1所述的服务器中的数据续传的处理方法,其特征在于,所述文件头中加入所述切分片段的时间戳和/或文件长度和/或校正码。
4.如权利要求1所述的服务器中的数据续传的处理方法,其特征在于,所述工作线程是以并行方式把所述切分片段写入所述目标文件中。
5.一种服务器中的数据续传的处理系统,其特征在于,包括:
本地目录,用于接收客户端的数据文件;
扫描模块,连接于所述本地目录,监视所述本地目录的所述数据文件是否异动;
控制模块,连接于所述扫描模块,所述控制模块包括至少一内部队列,所述内部队列储存所述数据文件,所述本地目录中的数据文件有异动时,所述扫描模块根据异动的种类的所述数据文件令所述控制模块创建新的所述内部队列或更新已知的所述数据文件的内容;
上传模块,连接于所述本地目录,所述本地目录中的数据文件有异动时,所述上传模块根据异动的数据文件的文件种类将所述数据文件指派至对应的所述内部队列;
至少一队列监视模块,连接于所述控制模块,所述队列监视模块取得所述内部队列中的数据文件并根据所述数据文件的文件大小决定切分数量,所述队列监视模块根据切分数量对所述数据文件进行切分,用于得到多个切分片段;以及
多个工作线程,连接于所述队列监视模块,每一工作线程读取所述所属的切分片段,所述工作线程根据预先创建的目标文件的文件头将读取的所述切分片段写入所述目标文件中对应的写入位置;
其中,当发生写入异常时,根据每一个切分片段的写入进度创建对应的元数据文件,当异常修复后并再次连线进行写入时,所述工作线程读取每一切分片段的元数据文件,所述工作线程依据元数据文件所记录的位置开始写入至目标文件中。
6.如权利要求5所述的服务器中的数据续传的处理系统,其特征在于,所述队列监视模块对所监控的所述内部队列的所述数据文件根据先进先出的方式从所述内部队列中取出所述数据文件。
7.如权利要求5所述的服务器中的数据续传的处理系统,其特征在于,切分所述数据文件为切分片段时,所述队列监视模块判断所述切分片段是否位于所述内部队列的尾端:若所述切分点位于所述尾端之后,则延伸切分片段的长度,令所述数据文件的切分位置至所述切分点上;若所述切分点位于所述尾端之前,则减缩切分片段的长度,令所述数据文件的切分位置至所述切分点上。
8.如权利要求5所述的服务器中的数据续传的处理系统,其特征在于,进一步所述工作线程以并行的方式把所述切分片段写入所述分散式文件装置中的目标文件。
该专利技术资料仅供研究查看技术是否侵权等信息,商用须获得专利权人授权。该专利全部权利属于乐视网信息技术(北京)股份有限公司,未经乐视网信息技术(北京)股份有限公司许可,擅自商用是侵权行为。如果您想购买此专利、获得商业授权和技术合作,请联系【客服】
本文链接:http://www.vipzhuanli.com/pat/books/201310741808.0/1.html,转载请声明来源钻瓜专利网。
- 上一篇:适用于车辆的电动后视镜的离合器
- 下一篇:半导体器件及其操作方法
- 数据显示系统、数据中继设备、数据中继方法、数据系统、接收设备和数据读取方法
- 数据记录方法、数据记录装置、数据记录媒体、数据重播方法和数据重播装置
- 数据发送方法、数据发送系统、数据发送装置以及数据结构
- 数据显示系统、数据中继设备、数据中继方法及数据系统
- 数据嵌入装置、数据嵌入方法、数据提取装置及数据提取方法
- 数据管理装置、数据编辑装置、数据阅览装置、数据管理方法、数据编辑方法以及数据阅览方法
- 数据发送和数据接收设备、数据发送和数据接收方法
- 数据发送装置、数据接收装置、数据收发系统、数据发送方法、数据接收方法和数据收发方法
- 数据发送方法、数据再现方法、数据发送装置及数据再现装置
- 数据发送方法、数据再现方法、数据发送装置及数据再现装置