[发明专利]一种基于统计概率的数据压缩方法及系统

说明书

本公开提供了一种基于统计概率的数据压缩方法及系统，获取电力系统实时数据库的数据；根据获取的数据，得到数据数值分布特征；根据得到的数值分布特征，划分预设时间步长内需要压缩的数据节点；根据压缩节点，对数据中的质量值和指令值对应的低概率值编码，开关量对应的变化时间点值编码；根据得到的各类型的编码，生成压缩数据；本公开通过分析电力领域质量值、开关量以及指令数值的变化规律，按照只存低概率值或变化的时间点值的思路，实现数据压缩处理；解压过程中，无需上下关联，只需要对被压数据进行相对值填充，即可实现解压；不影响其他压缩使用，可以混合传统的压缩算法，具有很好的广谱性。

技术领域

本公开涉及电力数据处理技术领域，特别涉及一种基于统计概率的数据压缩方法及系统。

背景技术

本部分的陈述仅仅是提供了与本公开相关的背景技术，并不必然构成现有技术。

实时数据库主要具有高实时性、高数据吞吐量以及高可靠性的特点，随着工业技术的快速发展，其需要处理和存储的数据量急剧上升，因此，非常有必要将数据压缩技术引入实时数据库系统中。

发明人发现，现行的实时数据压缩方法包括有损压缩和无损压缩，或是两种压缩方式的结合，其目的就是提高实时数据的压缩比，但是上述数据压缩方式的压缩效果依然较差，依然需要大量的存储空间进行数据存储，给数据的存储带来的极大的压力。

发明内容

为了解决现有技术的不足，本公开提供了一种基于统计概率的数据压缩方法及系统，通过分析电力领域质量值、开关量以及指令数值的变化规律，按照只存低概率值或变化的时间点值的思路，实现数据压缩处理；解压过程中，无需上下关联，只需要对被压数据进行相对值填充，即可实现解压；不影响其他压缩使用，可以混合传统的压缩算法，具有很好的广谱性。

为了实现上述目的，本公开采用如下技术方案：

本公开第一方面提供了一种基于统计概率的数据压缩方法。

一种基于统计概率的数据压缩方法，包括以下步骤：

获取电力系统实时数据库的数据；

根据获取的数据，得到数据数值分布特征；

根据得到的数值分布特征，划分预设时间步长内需要压缩的数据节点；

根据压缩节点，对数据中的质量值和指令值对应的低概率值编码，开关量对应的变化时间点值编码；

根据得到的各类型的编码，生成压缩数据。

本公开第二方面提供了一种基于统计概率的数据解压方法，用于本公开第一方面所述的基于统计概率的数据压缩方法，对被压缩数据解压后，根据数据分布特征进行数据填充，得到原始数据。

本公开第三方面提供了一种基于统计概率的数据压缩系统。

一种基于统计概率的数据压缩系统，包括：

数据获取模块，被配置为：获取电力系统实时数据库的数据；

分布特征提取模块，被配置为：根据获取的数据，得到数据数值分布特征；

数据节点划分模块，被配置为：根据得到的数值分布特征，划分预设时间步长内需要压缩的数据节点；

数据编码模块，被配置为：根据压缩节点，对数据中的质量值和指令值对应的低概率值编码，开关量对应的变化时间点值编码；

数据压缩模块，被配置为：根据得到的各类型的编码，生成压缩数据。

本公开第四方面提供了一种计算机可读存储介质，其上存储有程序，该程序被处理器执行时实现如本公开第一方面所述的基于统计概率的数据压缩方法中的步骤。