[发明专利]一种工业设备数据的处理方法及系统

说明书

本发明提供一种工业设备数据的处理方法及系统，所述方法包括：获取接入数据的元数据信息；根据所述接入数据的元数据信息，通过增量式统计的方式，获取接入数据的统计结果；将所述统计结果储存到关系数据库中。本发明的技术方案，将关系数据库与工业数据湖融合，提高了数据的检索效率。

技术领域

本发明涉及工业设备数据处理技术领域，尤其涉及一种工业设备数据的处理方法及系统。

背景技术

关系数据库具有结构化关系数据存储区，工业数据湖具有非结构化的数据存储区，基于对象存储的一体化时间序列与非结构化工业数据湖系统中的数据量庞大，该系统每日都有新的数据接入，该系统有特定的接入索引数据区，但是，现有技术中，查看该系统中的庞大数据信息的方法复杂，耗时较长。

发明内容

本发明的实施例提供一种工业设备数据的处理方法及系统，用于解决现有技术中查询系统中的庞大数据信息的方法复杂、耗时较长的问题。

为了解决上述技术问题，本发明提供如下技术方案：

一种工业设备数据的处理方法，包括：

获取接入数据的元数据信息；

根据所述接入数据的元数据信息，通过增量式统计的方式，获取接入数据的统计结果；

将所述统计结果储存到关系数据库中。

可选的，获取接入数据的元数据信息，包括：

根据检索日期及检索目标，从关系数据库及工业数据湖中，获取接入数据的元数据信息。

可选的，所述元数据信息包括以下至少一项：

本次接入数据的每个测点的名称、数据类型、数据的最小时间戳、最大时间戳及存储位置，

本次接入数据的时间戳；接入数据的真实日期。

可选的，根据所述接入数据的元数据信息，通过增量式统计的方式，获取接入数据的统计结果，包括：

通过增量式统计的方式，对所述元数据信息进行统计，获得元数据统计结果；

根据所述元数据统计结果，通过增量式统计的方式，对所述接入数据进行统计，获得接入数据统计结果。

可选的，对所述元数据信息进行统计，获得元数据统计结果，包括：

直接按接入日期对多个接入数据的元数据信息进行统计，获得元数据统计结果；和/或

根据所述接入数据的接入日期、接入次数、接入时间间隔，对接入频率及每个测点的接入频率中的至少一项，通过增量式统计的方式，对多个接入数据的元数据信息进行统计，获得元数据统计结果。

可选的，根据所述元数据统计结果，通过增量式统计的方式，对所述接入数据进行统计，获得接入数据统计结果，包括：

根据所述元数据统计结果，通过增量式统计的方式，直接对所述接入数据进行统计，获取接入数据的统计结果；和/或根据所述元数据统计结果，使用插值算法和/或相关性算法对每个测点,通过增量式统计的方式，对所述接入数据进行统计，获得接入数据统计结果。

可选的，使用插值算法,对每个测点,通过增量式统计的方式，对所述接入数据进行统计，获得接入数据统计结果,包括：

根据每日数据的接入次数、每次接入的时间范围、接入数据量以及多日数据信息的对比结果，计算出测点的采样周期、每日接入数据的完整度以及每日接入数据是否有重复；

根据测点的采样周期、每日接入数据的完整度以及每日接入数据是否有重复，获得接入数据统计结果。