[发明专利]一种监控数据的存储方法、系统、设备及存储介质

说明书

本申请公开了一种监控数据的存储方法，包括：预先建立用于索引的关联关系，其中，关联关系中存储有每一种监控数据的各项索引数据的数字编号值；接收待存储的监控数据；将监控数据中的各项索引数据所对应的数字编号值，和监控数据中的非索引数据进行压缩，并存储至硬盘。应用本申请的方案，可以有效地进行监控数据的存储，降低所需要的存储空间。本申请还提供了一种监控数据的存储系统、设备及存储介质，具有相应技术效果。

技术领域

本发明涉及存储技术领域，特别是涉及一种监控数据的存储方法、系统、设备及存储介质。

背景技术

目前的人工智能平台，通常基于时序型数据库存储监控数据，例如常用的是InfluxDB数据库。由于InfluxDB数据库本身的数据模型的设计以及压缩算法的设计，使得在长时间存储监控数据时会产生很多的重复数据，从而占用大量的磁盘空间，也会影响InfluxDB数据库的数据读取性能。InfluxDB数据库的数据结构可参阅表一。

表一：

通过以上数据结构可以看出，每一条数据中均有标签信息、时间信息、表名信息，存在大量的重复数据，随着监控数据的不断产生，就会占用大量的磁盘空间。

综上所述，如何有效地进行监控数据的存储，降低所需要的存储空间，是目前本领域技术人员急需解决的技术问题。

发明内容

本发明的目的是提供一种监控数据的存储方法，以有效地进行监控数据的存储，降低所需要的存储空间。

为解决上述技术问题，本发明提供如下技术方案：

一种监控数据的存储方法，包括：

预先建立用于索引的关联关系，其中，所述关联关系中存储有每一种监控数据的各项索引数据的数字编号值；

接收待存储的监控数据；

将所述监控数据中的各项索引数据所对应的数字编号值，和所述监控数据中的非索引数据进行压缩，并存储至硬盘。

优选的，所述将所述监控数据中的各项索引数据所对应的数字编号值，和所述监控数据中的非索引数据进行压缩，包括：

将所述监控数据中的非索引数据转换为无符号整数数据；

将所述监控数据中的各项索引数据所对应的数字编号值，和所述无符号整数数据进行压缩。

优选的，所述将所述监控数据中的非索引数据转换为无符号整数数据，包括：

将所述监控数据中的非索引数据中的时间数据转换为无符号整数数据；

将所述监控数据中的非索引数据中的属性数据转换为无符号整数数据以及无符号百分位整数数据。

优选的，所述将所述监控数据中的各项索引数据所对应的数字编号值，和所述监控数据中的非索引数据进行压缩，包括：

按照数据分片压缩的方式，将所述监控数据中的各项索引数据所对应的数字编号值，和所述监控数据中的非索引数据进行压缩；并且，数据分片压缩的时间划分节点为通过混合泊松分布算法计算出的时间划分节点。

优选的，还包括：

接收检索指令；

根据时间限制参数，所述检索指令中携带的各项索引数据，按照所述关联关系，从所述硬盘中读取出对于与所述检索指令的反馈数据。

优选的，还包括：

当产生新种类的监控数据时，基于新产生的所述监控数据对所述关联关系进行更新。

优选的，还包括：