[发明专利]一种数据同步方法、装置及系统有效
申请号: | 201710301920.0 | 申请日: | 2017-05-02 |
公开(公告)号: | CN107145562B | 公开(公告)日: | 2020-07-28 |
发明(设计)人: | 张夏旭 | 申请(专利权)人: | 北京奇艺世纪科技有限公司 |
主分类号: | G06F16/27 | 分类号: | G06F16/27;G06F16/23;H04L29/08 |
代理公司: | 北京柏杉松知识产权代理事务所(普通合伙) 11413 | 代理人: | 赵元;马敬 |
地址: | 100080 北京市海淀*** | 国省代码: | 北京;11 |
权利要求书: | 查看更多 | 说明书: | 查看更多 |
摘要: | |||
搜索关键词: | 一种 数据 同步 方法 装置 系统 | ||
1.一种数据同步方法,其特征在于,应用于数据同步系统中的目标数据仓库,所述数据同步系统包括源数据仓库、预设存储区域和所述目标数据仓库,其中,所述预设存储区域用于存储历史同步文件,所述预设存储区域为处于所述源数据仓库和所述目标数据仓库之间的独立存储区域,所述历史同步文件携带有数据的标识,所述方法包括:
获取待同步的目标数据的目标标识;
检测预设存储区域中是否存储有所述目标标识所对应的目标同步文件;
当预设存储区域中存储有所述目标标识所对应的目标同步文件时,获取所述预设存储区域中的所述目标同步文件;
将所获取的所述目标同步文件中的目标数据更新到所述目标数据仓库;
其中,检测到预设存储区域中存储有所述目标标识所对应的目标同步文件的步骤之后,所述获取所述预设存储区域中的所述目标同步文件的步骤之前,所述方法还包括:对所述目标同步文件添加加锁标识;
所述获取所述预设存储区域中的所述目标同步文件的步骤之后,所述方法还包括:将所述同步文件的所述加锁标识去除。
2.根据权利要求1所述的方法,其特征在于,所述方法还包括:
当预设存储区域中未存储有所述目标标识所对应的目标同步文件时,向源数据仓库发送携带有所述目标标识的数据同步请求,以使得所述源数据仓库在接收到所述数据同步请求后,基于具有所述目标标识的所述目标数据生成所述目标同步文件,并发送给所述目标数据仓库;
接收所述源数据仓库发送的所述目标同步文件,并将所接收到的目标同步文件中的目标数据更新到所述目标数据仓库。
3.根据权利要求2所述的方法,其特征在于,所述方法还包括:
校验存储到目标数据仓库的目标数据与源数据仓库中的目标数据是否一致,如果不一致,返回向源数据仓库发送数据同步请求的步骤。
4.一种数据同步装置,其特征在于,应用于数据同步系统中的目标数据仓库,所述数据同步系统包括源数据仓库、预设存储区域和所述目标数据仓库,其中,所述预设存储区域用于存储历史同步文件,所述预设存储区域为处于所述源数据仓库和所述目标数据仓库之间的独立存储区域,所述历史同步文件携带有数据的标识,所述装置包括:
标识确定模块,用于确定待同步的目标数据的目标标识;
文件检测模块,用于检测预设存储区域中是否存储有所述目标标识所对应的目标同步文件,当检测结果为是时,触发文件获取模块;
所述文件获取模块,用于获取所述预设存储区域中的所述目标同步文件;
数据更新模块,用于将所获取的所述目标同步文件中的目标数据更新到所述目标数据仓库;
其中,所述装置还包括:加锁模块,用于在所述文件检测模块检测到预设存储区域中存储有所述目标标识所对应的目标同步文件之后,在所述文件获取模块获取所述预设存储区域中的所述目标同步文件之前,对所述目标同步文件添加加锁标识;
解锁模块,用于在所述文件获取模块获取所述预设存储区域中的所述目标同步文件之后,将所述同步文件的所述加锁标识去除。
5.根据权利要求4所述的装置,其特征在于,所述装置还包括:
请求发送模块,用于向源数据仓库发送携带有所述目标标识的数据同步请求,以使得所述源数据仓库在接收到所述数据同步请求后,基于具有所述目标标识的所述目标数据生成所述目标同步文件,并发送给所述目标数据仓库;
文件接收模块,用于接收所述源数据仓库发送的所述目标同步文件,并将所接收到的目标同步文件中的目标数据更新到所述目标数据仓库。
6.根据权利要求5所述的装置,其特征在于,所述装置还包括:
数据校验模块,用于校验存储到目标数据仓库的目标数据与源数据仓库中的目标数据是否一致,如果不一致,触发所述请求发送模块。
该专利技术资料仅供研究查看技术是否侵权等信息,商用须获得专利权人授权。该专利全部权利属于北京奇艺世纪科技有限公司,未经北京奇艺世纪科技有限公司许可,擅自商用是侵权行为。如果您想购买此专利、获得商业授权和技术合作,请联系【客服】
本文链接:http://www.vipzhuanli.com/pat/books/201710301920.0/1.html,转载请声明来源钻瓜专利网。
- 数据显示系统、数据中继设备、数据中继方法、数据系统、接收设备和数据读取方法
- 数据记录方法、数据记录装置、数据记录媒体、数据重播方法和数据重播装置
- 数据发送方法、数据发送系统、数据发送装置以及数据结构
- 数据显示系统、数据中继设备、数据中继方法及数据系统
- 数据嵌入装置、数据嵌入方法、数据提取装置及数据提取方法
- 数据管理装置、数据编辑装置、数据阅览装置、数据管理方法、数据编辑方法以及数据阅览方法
- 数据发送和数据接收设备、数据发送和数据接收方法
- 数据发送装置、数据接收装置、数据收发系统、数据发送方法、数据接收方法和数据收发方法
- 数据发送方法、数据再现方法、数据发送装置及数据再现装置
- 数据发送方法、数据再现方法、数据发送装置及数据再现装置