[发明专利]文件属性信息统计方法、装置、系统、设备及存储介质

说明书

本发明公开了一种文件属性信息统计方法，在本方法中，通过在内存中建立内存目录树，并实时更新内存目录树中的属性信息，可以在用户需要获取文件的属性信息时，直接从内存目录树中获取；并且在获取属性信息时，为了进一步提高数据获取速度，本方案通过多线程并行查询方式查询属性信息，通过归并后得到最终的统计结果。本发明还公开了一种文件属性信息统计装置、系统、设备及计算机可读存储介质，同样能实现上述技术效果。

技术领域

本发明涉及属性信息统计技术领域，更具体地说，涉及一种文件属性信息统计方法、装置、系统、设备及计算机可读存储介质。

背景技术

目前，在对文件的数量信息或者数据量等属性信息进行统计时，传统的统计方式为通过命令的形式进行统计，这种统计方式的统计速度较慢；例如：在分布式存储小文件应用场景中，当容量达到一定规模后会出现千亿规模级别的文件量，这时如果依靠传统的统计方式进行统计，则会花费较大的统计时间，如果应用在需要频繁统计文件数量或者数据量的场景中，会存在较大的时间隐患。

因此，如何快速的统计文件的属性信息，减少统计时间，是本领域技术人员需要解决的问题。

发明内容

本发明的目的在于提供一种文件属性信息统计方法、装置、系统、设备及计算机可读存储介质，以实现快速的统计文件的属性信息，减少统计时间。

为实现上述目的，本发明实施例提供了如下技术方案：

一种文件属性信息统计方法，包括：

接收属性信息统计指令；

利用所述属性信息统计指令，确定内存目录树中的待查询索引节点；其中，所述内存目录树中的每个索引节点包括实时更新的非目录文件属性信息及目录文件属性信息；

通过多线程并行查询方式，查询所述待查询索引节点的属性信息；

将每个线程的属性信息查询结果进行归并，得到统计结果。

其中，还包括：

接收属性信息更新指令；

利用所述属性信息更新指令，确定内存目录树中的待修改索引节点；

根据所述属性信息更新指令对所述待修改索引节点进行修改，并在所述待修改索引节点中添加更新时间戳。

其中，所述接收属性信息更新指令之后，还包括：

将所述属性信息更新指令中的属性信息修改内容写入KV数据库。

其中，还包括：

当所述内存目录树的内存占用量超过预定阈值时，按照LRU算法确定所述内存目录树中的待处理数据，并进行老化处理。

一种文件属性信息统计装置，包括：

第一接收模块，用于接收属性信息统计指令；

第一确定模块，用于利用所述属性信息统计指令，确定内存目录树中的待查询索引节点；其中，所述内存目录树中的每个索引节点包括实时更新的非目录文件属性信息及目录文件属性信息；

查询模块，用于通过多线程并行查询方式，查询所述待查询索引节点的属性信息；

查询结果归并模块，用于将每个线程的属性信息查询结果进行归并，得到统计结果。

其中，还包括：

第二接收模块，用于接收属性信息更新指令；

第二确定模块，用于利用所述属性信息更新指令，确定内存目录树中的待修改索引节点；