[发明专利]工业物联网的数据采集分析方法

说明书

本发明公开了一种工业物联网的数据采集分析方法，包括以下步骤：由代理端通过网络向中心服务端发送心跳数据包；中心服务端收到心跳数据包后根据数据库的配置要求，将代理端采集参数生成配置数据字符串应答发送至代理端；代理端收到代理端采集参数后启动数据采集，由多个与代理端处于同一子网络的数据源设备获取原始数据，代理端将获取的原始数据规格化模块形成统一的数据格式并发送至中心服务端；中心服务端收到统一的数据格式的数据后启动处理线程模块，对收到的数据进行解析、过滤并转存至数据库中；数据库通过接口方式向第三方系统提供数据。本发明解决终端的数据源信息孤岛、数据采集存储问题，以接口的方式提供给第三方系统进行数据调用。

技术领域

本发明涉及一种数据采集分析系统，特别是涉及一种工业物联网的数据采集分析方法。

背景技术

随着新一轮的科技革命和产业变革的蓬勃兴起，工业正加速向数字化、网络化、智能化方向延伸拓展，软件、数据、平台、服务、智能等多元主导的特征日趋明显。而在工业物联网中，各种原始数据的获取终端通常具有自己的数据格式，因此应用系统难以通过一个标准从各终端获取需要的数据，必须整合各种协议以便达到对各类设备兼容，获取相应数据实现系统功能的目的。如此使得应用系统臃肿庞大不利于使用，或者只能放弃部分终端形成信息孤岛。

发明内容

针对上述现有技术的缺陷，本发明提供了一种工业物联网的数据采集分析方法，解决采集端数据源格式不统一、数据需要集中上传到服务器的时候需要针对每种格式或者协议进行传输的问题，以及解决应用系统无法直接读取和利用原始数据的问题。

本发明技术方案如下：一种工业物联网的数据采集分析方法，包括以下步骤：由代理端通过网络向中心服务端发送心跳数据包；所述中心服务端收到所述心跳数据包后根据数据库的配置要求，将代理端采集参数生成配置数据字符串应答发送至代理端；所述代理端收到代理端采集参数后启动数据采集，由多个与所述代理端处于同一子网络的数据源设备获取原始数据，所述代理端将获取的原始数据导入规格化模块形成统一的数据格式并发送至所述中心服务端；所述中心服务端收到所述统一的数据格式的数据后启动处理线程模块，对收到的数据进行解析、过滤并转存至数据库中；所述数据库通过接口方式向第三方系统提供数据。

进一步地，所述代理端通过网络向中心服务端发送心跳数据包是按照设定时间间隔通过标准TCP/IP socket方式发送，所述中心服务端将代理端采集参数生成配置数据字符串应答发送至代理端是通过TCP/IP socket方式发送。

进一步地，所述中心服务端收到所述心跳数据包后通过对应的所述代理端的注册ID号判断所述代理端是否注册，如果所述代理端未注册则所述中心服务端强制关闭网络socket连接。

进一步地，所述代理端启动数据采集是启动多个实例以TCP Server模式监听端口被动接收原始数据或者通过TCP Client模式启动采集线程主动抓取原始数据。

进一步地，所述代理端将统一数据格式后的数据发送至所述中心服务端是通过启动发送模块接收多个规格化模块推送的统一数据格式后的数据然后通过标准TCP/IPsocket方式发送至所述中心服务端。

进一步地，所述代理端采集参数包括采集量、采集频率、采集方式、上传间隔和心跳间隔。

进一步地，所述处理线程模块首先对收到的数据进行完整性甄别并抛弃不完整的数据，然后对数据切割收取每个参数名和值并根据预置单位转换成统一的数值，再对每个参数的值进行合理性判断抛弃异常数据，剩余的正常数据的一个参数为一条记录颗粒度，通过CURL接口存储到所述数据库。

进一步地，所述统一的数据格式是WITS。

进一步地，所述代理端通过网络向中心服务端发送心跳数据包包括代理端软件版本，所述中心服务端收到所述心跳数据包后比对所述心跳数据包的代理端软件版本与本地最新软件版本，如果本地最新软件版本较高，则在所述中心服务端应答所述代理端时同时将较新的代理端软件推送至代理端。