[发明专利]分布式存储系统的服务器及服务器之间的数据同步方法在审
| 申请号: | 201410843521.3 | 申请日: | 2014-12-30 |
| 公开(公告)号: | CN104506643A | 公开(公告)日: | 2015-04-08 |
| 发明(设计)人: | 徐锐波;邹月明 | 申请(专利权)人: | 北京奇虎科技有限公司;奇智软件(北京)有限公司 |
| 主分类号: | H04L29/08 | 分类号: | H04L29/08;H04L29/06 |
| 代理公司: | 北京市立方律师事务所 11330 | 代理人: | 王增鑫 |
| 地址: | 100088 北京市西城区新*** | 国省代码: | 北京;11 |
| 权利要求书: | 查看更多 | 说明书: | 查看更多 |
| 摘要: | |||
| 搜索关键词: | 分布式 存储系统 服务器 之间 数据 同步 方法 | ||
技术领域
本发明涉及分布式存储服务器端的技术领域,具体而言,本发明涉及一种分布式存储系统的服务器及服务器之间的数据同步方法。
背景技术
随着大数据时代的来临,基于互联网或者基于通信网络的服务提供者需要存储海量的数据,以支持其运营,同时,服务提供者通过对海量数据的分析,可向用户提供更便利且更具有个性化的服务,从而达到提高其服务水平的目的。
目前,通常由分布式存储系统来存储海量的数据。例如,技术人员将服务器集群分散布置,将海量的数据按照某些规则分散存储在不同的服务器中;这些服务器通常可以根据用户的请求,为用户提供数据查询、数据更新等服务。为了提高数据的安全性和可靠性,分布式存储系统通常还设置有一定数量的备份服务器,以用于备份数据。
然而,现有的分布式存储系统的数据同步方法中,备份服务器通常不向用户提供服务,而只是依据规定的时间间隔,将当前服务器的硬盘中的数据复制到备份服务器中;当当前服务器发生故障重启后,通常是将整个备份服务器中的数据都传输恢复到当前服务器中,传输的数据较多,导致数据恢复所花费的时间较长。也就是说,当前服务器从发生故障到设备恢复的时间间隔内,都无法响应涉及当前服务器中任何数据操作请求,这样会导致用户请求服务后的等待时间较长,降低了用户体验。此外,现有的数据同步方法也容易导致服务器与备份服务器所在的局域网网络堵塞,影响其他服务器或者备份服务器的正常运行。
因此,现有的分布式存储系统的数据同步方法具有数据同步耗时较长且花费较高网络资源的缺陷,进一步地,会产生不能及时响应用户的请求的情况发生,导致用户长时间的等待,降低用户的体验。
发明内容
本发明针对现有的分布式存储系统的数据同步方法的缺点,提出一种分布式存储系统的服务器及服务器之间的数据同步方法,用以解决现有的数字同步方法存在的效率较低的问题。
本发明的技术方案根据一个方面,提供了一种分布式存储系统中第一服务器端的数据同步方法,包括:
第一服务器接收到数据更新请求,查找与所述数据更新请求中的关键字信息相对应的数据分片;
根据所述数据更新请求中的更新数据,更新所述数据分片;
若检测到设置有与所述数据分片名称相同的其他数据分片的第二服务器离线,将所述更新数据的更新操作记录到所述第一服务器的第一日志中,其中,所述第一服务器与第二服务器互为兄弟服务器,其中均设置有相同名称的数据分片;
响应于所述第二服务器发送的日志同步请求,向第二服务器返回第一日志。
进一步,所述向第二服务器返回第一日志之后,还包括:
接收第二服务器发送的数据同步请求,从中解析出关键字信息;
查找本地与解析出的关键字信息相应的数据分片;
将查找到的数据分片中的数据返回至第二服务器。
较佳地,所述第一服务器接收到数据更新请求,具体包括:
所述第一服务器预先创建的主控制进程接收多个客户端发送的数据更新请求;
基于接收到的每个数据更新请求,生成该数据更新请求的工作信道;
所述主控制进程将接收的数据更新请求及相应的工作信道,均匀分配给所述第一服务器预先创建的多个工作进程;
所述工作进程根据分配到的数据更新请求中的关键字信息,查找对应的数据分片。
较佳地,所述主控制进程接收多个客户端发送的数据更新请求,具体包括:
所述主控制进程利用HTTP协议监听网络端口;
利用HTTP协议转换监听到的数据更新请求的格式,将转换格式后的数据更新请求作为接收到的数据更新请求。
本发明的技术方案根据另一个方面,还提供了一种分布式存储系统中第二服务器端的数据同步方法,包括:
向第一服务器发送日志同步请求;
根据接收到的所述第一服务器返回的第一日志,进行数据同步操作,其中,所述第一服务器与第二服务器互为兄弟服务器,其中均设置有相同名称的数据分片。
较佳地,向第一服务器发送日志同步请求,包括:
当所述第二服务器在上线状态下,周期性向第一服务器发送日志同步请求;或
当所述第二服务器从离线状态变更至在线状态时,向第一服务器发送日志同步请求。
较佳地,根据接收到的所述第一服务器返回的第一日志,进行数据同步操作,具体包括:
将接收到的第一服务器返回的第一日志与本地第二日志相比较,以确定更新操作列表;
根据所述更新操作列表,更新本地相应的数据分片。
该专利技术资料仅供研究查看技术是否侵权等信息,商用须获得专利权人授权。该专利全部权利属于北京奇虎科技有限公司;奇智软件(北京)有限公司,未经北京奇虎科技有限公司;奇智软件(北京)有限公司许可,擅自商用是侵权行为。如果您想购买此专利、获得商业授权和技术合作,请联系【客服】
本文链接:http://www.vipzhuanli.com/pat/books/201410843521.3/2.html,转载请声明来源钻瓜专利网。
- 上一篇:一种数据存储系统及存储和访问方法
- 下一篇:食物营养分析及健康管理系统





