[发明专利]一种利用非关系数据库存储海量工业设备监测数据的方法

摘要

发明涉及一种利用非关系数据库存储海量工业设备监测数据的方法，属于计算机数据库管理技术领域。首先使多个非结构化数据管理系统组成分布式结构的非关系数据库集群，从关系数据库中读取海量工业设备监测数据，并将读取的监测数据以逗号分隔的文本文件形式存储到多台客户机中，建立一个非关系数据库存储模式，将客户机上的上述以逗号分隔的文本文件导入到非关系数据库集群中。本方法能够有效存储海量的设备监测数据，并支持快速数据查询与分析，使得企业能够对海量监测数据进行查询和分析，挖掘监测数据中具有商业价值的信息，最终达到对工业生产的设计、制造、销售、使用与维护等方面提供借鉴的目的。

主权项

一种利用非关系数据库存储海量工业设备监测数据的方法，其特征在于该方法包括以下步骤：（1）使多个非结构化数据管理系统组成一个具有分布式结构的非关系数据库集群；（2）从关系数据库中读取海量工业设备监测数据，并将读取的监测数据以逗号分隔的文本文件形式存储到多台客户机中，具体过程为：（2‑1）使用镜像磁盘阵列克隆方法，将关系数据库中在线磁盘阵列中的海量工业设备监测数据拷贝到关系数据库中离线镜像磁盘阵列中，并使在线磁盘阵列与关系数据库断开，使离线镜像磁盘阵列与关系数据库相连；（2‑2）使多台客户机的客户端与关系数据库相连，客户端按天读取关系数据库离线镜像磁盘阵列中的海量工业设备监测数据；（2‑3）将上述海量工业设备监测数据以逗号分隔的文本文件形式存储到客户机上，文件格式为：“设备编号，监测数据标识，接收时间，监测值”；（3）建立一个非关系数据库存储模式，具体步骤如下：（3‑1）使客户机的客户端与非关系数据库相连；（3‑2）分别将上述以逗号分隔的文本文件中的监测数据标识作为列族名、设备编号作为行键、接收时间作为列名、监测值作为列值，建立一个非关系数据库的自由表模式；（3‑3）设置非关系数据库为多备份；（4）将客户机上的上述以逗号分隔的文本文件导入到非关系数据库集群中，导入过程如下：（4‑1）使客户机上的客户端与非关系数据库集群的底层接口相连，并将非关系数据库集群的写入一致性级别设置为最终一致性；（4‑2）客户端从客户机上按天读取上述以逗号分隔的文本文件，并根据步骤（2‑3）的文件格式对读取的文件进行解析，得到工业设备监测数据，并将工业设备监测数据存储在客户机的内存中；（4‑3）将客户机内存中的工业设备监测数据写入非关系数据库集群中。