[发明专利]电力物联网中流数据处理方法、装置及终端设备

权利要求书

1.一种电力物联网中流数据处理方法，其特征在于，基于分布式流数据处理框架Apache Storm对电力物联网中的流数据进行处理；所述方法包括：

通过Spout，接收流数据并发送至第一Bolt节点和第二Bolt节点；

通过所述第一Bolt节点，将接收到的流数据保存至分布式文件系统中；

通过所述第二Bolt节点，对接收到的流数据进行预处理得到处理后的流数据；通过第三Bolt节点，对所述处理后的流数据进行分类，并将不同类别的流数据发送至不同的第四Bolt节点；通过第四Bolt节点，选取出参考数据，并将所述参考数据与其他数据发送至第五Bolt节点；通过所述第五Bolt节点，将其他数据与所述参考数据对比，得到正常数据、异常数据和故障数据，并将所述正常数据、所述异常数据和所述故障数据存储至所述分布式文件系统中。

2.根据权利要求1所述的电力物联网中流数据处理方法，其特征在于，第四Bolt节点的数量为两个；

所述通过第三Bolt节点，对所述处理后的流数据进行分类，并将不同类别的流数据发送至不同的第四Bolt节点，包括：

通过所述第三Bolt节点，将所述处理后的流数据划分为用于预测的数据和用于分类的数据，并将所述用于预测的数据发送至第一个第四Bolt节点，将所述用于分类的数据发送至第二个第四Bolt节点；

相应的，所述通过第四Bolt节点，选取出参考数据，并将所述参考数据与其他数据发送至第五Bolt节点，包括：

通过所述第二个第四Bolt节点，从所述用于分类的数据中选取出参考数据，并将所述参考数据与所述用于分类的数据中的其他数据发送至第五Bolt节点；

所述电力物联网中流数据处理方法还包括：

通过所述第一个第四Bolt节点，基于所述用于预测的数据进行预测。

3.根据权利要求2所述的电力物联网中流数据处理方法，其特征在于，所述通过所述第一个第四Bolt节点，基于所述用于预测的数据进行预测，包括：

通过所述第一个第四Bolt节点，基于所述用于预测的数据和支持向量机模型进行预测。

4.根据权利要求1所述的电力物联网中流数据处理方法，其特征在于，所述电力物联网中流数据处理方法还包括：

采用流水线模式对电力物联网中流数据进行处理。

5.根据权利要求1所述的电力物联网中流数据处理方法，其特征在于，所述电力物联网中流数据处理方法还包括：

基于循环队列和流转算子实现流数据和各个节点的处理逻辑的流转。

6.根据权利要求1所述的电力物联网中流数据处理方法，其特征在于，所述通过所述第二Bolt节点，对接收到的流数据进行预处理得到处理后的流数据，包括：

通过所述第二Bolt节点，对接收到的流数据进行数据的冗余属性删除处理、重复数据删除处理、属性缺失率大于预设百分比的数据删除处理以及属性缺失率不大于所述预设百分比的数据中的缺失数据补全处理，得到处理后的流数据。

7.根据权利要求1至6任一项所述的电力物联网中流数据处理方法，其特征在于，所述电力物联网中流数据处理方法还包括：

基于Map Reduce，对电力物联网中流数据进行清洗，删除不合格数据，保留有用数据。