[发明专利]一种对象存储的信息统计方法、装置、设备及可读介质

说明书

本发明公开了一种对象存储的信息统计方法，包括：响应于接收到客户端操作请求，对操作请求进行处理以得到请求结果；记录操作请求对应的操作信息，并将操作信息记录在分布式数据库中；基于请求结果判断是否操作成功，若是操作成功则进一步判断操作请求的类型是否为读操作；以及若是操作请求的类型不为读操作，则将操作请求的属性信息更新在分布式数据库中。本发明还公开了对应的装置、计算机设备和可读存储介质。本发明针对对象存储信息统计中IO放大、性能损耗、查询速度较慢、统计信息不直观等问题，在存储系统中引入分布式数据库，在集群粒度、存储用户粒度和存储桶粒度上，记录操作信息，从而完成对象信息的存储，便于客户端进行查看和分析。

技术领域

本发明涉及对象存储技术领域，尤其涉及一种对象存储的信息统计方法、装置、设备及可读介质。

背景技术

在大数据时代，对象存储服务(Object Storage Service，OSS)是一种新兴的海量、安全、低成本、高可靠的存储服务，适合存放任意类型的文件。随着对象数据的增多，对象存储使用者需要对自己的对象数据进行统计分析，一般的统计维度为对象类型，对象大小，对象标签等，统计粒度为存储用户或者存储桶。常用的统计方法是在业务IO(输入/输出Input/Output)的过程中增加操作对象信息的记录，在存储池中持久化存储，在用户进行查询时将数据从存储池中读取出来返回给用户。

但是常用的方法增加了对象读写的IO流程，即额外增加了记录对象信息至存储池的操作，且在查询时需要遍历整个对象才能找到，并没有进行检索和统计的优化，只是存储记录了对象的属性信息而已。

发明内容

有鉴于此，本发明实施例的目的在于提出一种对象存储的信息统计方法、装置、设备及可读介质，通过在分布式对象存储的节点上增加分布式数据库，在对象写入时记录对象的属性信息，并记录操作信息，实现了用户对存储系统中的对象进行统计分析。

基于上述目的，本发明实施例的一方面提供了一种对象存储的信息统计方法，包括以下步骤：响应于接收到客户端操作请求，对所述操作请求进行处理以得到请求结果；记录所述操作请求对应的操作信息，并将所述操作信息记录在分布式数据库中；基于所述请求结果判断是否操作成功，若是操作成功则进一步判断所述操作请求的类型是否为读操作；以及若是所述操作请求的类型不为读操作，则将所述操作请求的属性信息更新在分布式数据库中。

在一些实施方式中，方法还包括：响应于接收到客户端查询统计信息请求，基于统计粒度进行不同级别的查询。

在一些实施方式中，基于统计粒度进行不同级别的查询包括：基于集群/存储用户/存储桶进行集群级别/存储用户级别/存储桶级别的查询。

在一些实施方式中，对所述操作请求进行处理以得到请求结果包括：基于所述操作请求从存储池中获取请求结果，并将所述请求结果返回给客户端。

在一些实施方式中，记录所述操作请求对应的操作信息包括：记录所述操作请求对应的操作类型和/或操作结果和/或操作耗时和/或操作时间和/或操作流量。

在一些实施方式中，将所述操作请求的属性信息更新在分布式数据库中包括：判断所述操作请求的类型是否为删除操作或新增操作；若是所述操作请求的类型为删除操作，则将所述分布式数据库中对应的属性信息删除；若是所述操作请求的类型为新增操作，则将对应的属性信息新增到所述分布式数据库中；若是所述操作请求的类型不为删除操作或新增操作，则将对应的属性信息更新到所述分布式数据库中。

在一些实施方式中，将所述操作请求的属性信息更新在分布式数据库中包括：将所述操作请求的对象类型和/或对象大小和/或对象时间和/或对象标签更新在分布式数据库中。