[发明专利]一种检测Ceph对象的方法和服务器有效
| 申请号: | 202011060922.3 | 申请日: | 2020-09-30 |
| 公开(公告)号: | CN112231326B | 公开(公告)日: | 2022-08-30 |
| 发明(设计)人: | 李晓颖 | 申请(专利权)人: | 新华三大数据技术有限公司 |
| 主分类号: | G06F16/23 | 分类号: | G06F16/23;G06F16/17;G06F16/182 |
| 代理公司: | 暂无信息 | 代理人: | 暂无信息 |
| 地址: | 450000 河南省郑州市郑州高*** | 国省代码: | 河南;41 |
| 权利要求书: | 查看更多 | 说明书: | 查看更多 |
| 摘要: | |||
| 搜索关键词: | 一种 检测 ceph 对象 方法 服务器 | ||
本说明书提供一种检测Ceph对象的方法和服务器,该方法包括:监控预设周期内Ceph对象是否有数据变化,若无变化,则不数据一致性检测,若有变化,则对所述Ceph对象进行数据一致性检测。通过该方法,可以当监控到对象数据变化时,对该对象进行数据检测,从而避免现有技术中对Ceph所有对象进行数据检测造成大量占用系统资源的情况。
技术领域
本公开涉及通信技术领域,尤其涉及一种检测Ceph对象的方法和服务器。
背景技术
Ceph是一种为优秀的性能、可靠性和可扩展性而设计的统一的、分布式文件系统,如下所示,Ceph生态系统架构可以划分为四部分:
1.Clients:客户端(数据用户)
2.cmds:Metadata server cluster,元数据服务器(缓存和同步分布式元数据)
3.cosd:Object storage cluster,对象存储集群(将数据和元数据作为对象存储,执行其他关键职能)
4.cmon:Cluster monitors,集群监视器(执行监视功能)
Ceph实现了Scrub机制,采用一种通过后台扫描的方案来解决ceph数据一致性的问题。
Scrub按照扫描的内容可以分为两种:
1.Scrub——仅仅对比对象各副本的元数据,来检查数据的一致。由于只检查元数据,读取数据量和计算量都比较小,速度比较快,是一种轻度的数据检查。
2.deep-Scrub——不但检查对象各副本的元数据,还检查对象的数据内容是否一致,实现深度扫描,几乎要扫描磁盘上所有的数据并计算其CRC32校验值,耗时耗资源。
发明内容
本说明书提供了一种检测Ceph对象的方法和服务器,通过该方法,可以当监控到对象数据变化时,对该对象进行数据检测,从而避免现有技术中对Ceph所有对象进行数据检测造成大量占用系统资源的情况。
本说明书提供了一种检测Ceph对象的方法,该方法包括:
监控预设周期内Ceph对象是否有数据变化;
若无变化,则不数据一致性检测;
若有变化,则对所述Ceph对象进行数据一致性检测。
通过上述实施例可以看出,通过监控Ceph对象是否有数据变化,有针对性的对有数据变化的Ceph进行数据一致性检测,从而避免全盘检测,降低了检测资源的使用率。
可选的,所述监控预设周期内Ceph对象是否有数据变化,具体包括:
判断预设周期内针对Ceph对象是否有新增PGlog日志;
若有,则确定预设周期内针对Ceph对象有数据变化;
否则,确定预设周期内针对Ceph对象没有数据变化。
可选的,若有变化,则对所述Ceph对象进行数据一致性检测,具体包括:
获取该预设周期对应的时间段;
根据该时间段内所述Ceph对象新增PGlog日志的顺序,对所述Ceph对象进行数据一致性检测;
若发现数据不一致,则上报管控平台。
可选的,所述一致性检测包括Ceph的scrub检测和/或Deep-scrub检测。
通过上述实施例可以看出,设备会监控存储的数据是否有变化,如果有变化时,针对变化的数据进行数据一致性检测,从而无需进行全数据检测,节省了设备资源。
该专利技术资料仅供研究查看技术是否侵权等信息,商用须获得专利权人授权。该专利全部权利属于新华三大数据技术有限公司,未经新华三大数据技术有限公司许可,擅自商用是侵权行为。如果您想购买此专利、获得商业授权和技术合作,请联系【客服】
本文链接:http://www.vipzhuanli.com/pat/books/202011060922.3/2.html,转载请声明来源钻瓜专利网。





