[发明专利]基于无界大数据湖的水利要素数据采集查询方法和装置

说明书

本发明涉及一种基于无界大数据湖的水利要素数据采集查询方法、装置、计算机设备和存储介质，通过获取用户输入的关键字，并在水利数据湖中查找和该关键字有关联的目标水利要素数据，其中该水利数据湖存储有多个水利业务系统的水利要素数据和这些水利要素数据之间的通过多种关联得到的关系图谱，再将查询到的目标水利要素数据作为结果展示。相对于传统的只能在每个独立的水利业务系统中查询水利数据查询方式，本申请提供的方法可以在规范化存储多个水利业务系统的水利数据湖中，利用多种关联分析技术挖掘数据之间的关联关系，查找出相关的数据，打破了不同系统间的数据边界，实现水利全要素数据统一查询分析，提高了查找水利要素数据的效率。

技术领域

本发明涉及水利技术领域，特别是涉及一种基于无界大数据湖的水利要素数据采集查询方法、装置、计算机设备和计算机可读存储介质。

背景技术

在水利行业中，通常需要对水利工程设施进行养护工作，以及对水利工程周边有关环境进行监控，因此需要从现场的监测设备采集数据，进行设施安全、环境安全、运行安全等方面的数据分析。分析的过程中通常需要对相关数据进行查询。在传统的数据查询中，通常是在每个不同的系统中查询，再将查询到的不同类型的数据进行分析，然而由于不同系统之间的数据结构各异，这种查询的过程比较繁琐，需要进行二次转换，不利于相关人员进行快速组合分析，例如不同河段的水文站点的数据属于不同系统，需要分别查询相关数据后，才可以进行整条河流水文计算。

因此，传统的水利要素数据查询方法存在查询效率低的缺陷。

发明内容

基于此，有必要针对传统技术查询效率低的技术问题，提供一种基于无界大数据湖的水利要素数据采集查询方法、装置、计算机设备和计算机可读存储介质。

一种基于无界大数据湖的水利要素数据采集查询方法，包括步骤：

获取用户输入的关键字；所述关键字包括待查询的水利要素数据的关键字；

在水利数据湖中查找与所述关键字有关联的目标水利要素数据；所述水利数据湖中存储有多个水利业务系统的水利要素数据以及所述水利要素数据之间的关系图谱；所述关系图谱根据所述水利要素数据之间的归属关联、空间关联中的至少一种得到；

将所述目标水利要素数据作为结果展示。

在一个实施例中，所述获取用户输入的关键字之前，还包括：

获取所述多个水利业务系统中的原始水利数据；

将所述原始水利数据按预设分类标准进行分类，得到分类后的水利数据；

对所述分类后的水利数据进行元数据抽取，得到所述水利要素数据；

根据所述归属关联、空间关联中的至少一种，对所述水利要素数据进行关联挖掘，根据挖掘出的关联关系得到所述水利要素数据之间的关系图谱；

根据所述水利要素数据以及所述关系图谱，得到所述水利数据湖。

在一个实施例中，所述将所述原始水利数据按预设分类标准进行分类，包括：

将所述原始水利数据中的建筑数据分类为静态数据；

将所述原始水利数据中按照时间序列产生的数据分类为观测数据；

将所述原始水利数据中的字段名称和取值说明分类为字段标准编码；

所述对所述水利数据进行元数据抽取，得到所述水利要素数据，包括：

抽取所述分类后的水利数据中的静态数据和字段标准编码，得到所述水利要素数据。