[发明专利]数据处理方法和数据处理系统

说明书

本公开提供一种数据处理方法和数据处理系统。数据处理方法应用于数据处理系统，所述数据处理系统包括数据压缩组件和服务协调组件；所述数据处理方法包括：通过所述数据压缩组件对满足数据压缩条件的历史数据进行压缩，并且通过所述服务协调组件禁止对正在压缩中的历史数据进行写入和/或读取；响应于所述历史数据的压缩完成，通过所述服务协调组件允许对压缩后的历史数据进行写入和/或读取。

技术领域

本公开涉及数据处理领域和新能源发电领域，具体涉及一种数据处理方法和数据处理系统。

背景技术

新能源行业近年来蓬勃发展，风力发电、光伏发电是近年来非常重要的清洁能源(也可称为新能源)发电技术。新能源发电设备的安全稳定运行对于电网稳定、新能源发电量保证尤为重要。随着近年来新能源发电的快速布局，发电设备的运行数据越来越多，用途越来越多。这就对提供实时数据存储查询提出了非常高的要求。

数据处理的方法很多，但难以良好地支持新能源行业的海量数据处理，不能在数据的存储或压缩的同时提供数据的快速检索。而且，数据处理方法往往忽视了新能源设备数据的使用特点和应用场景。

发明内容

新能源发电设备的数据处理既需要高压缩率降低占用的存储空间，又需要提供高效的数据检索能力和数据写入能力。这是新能源大数据处理领域的一大难题。本发明能够依据新能源发电设备的数据使用特点，可以在对数据进行压缩的同时保证数据的可用性(例如，数据的可读写性)。

根据本公开的实施例，提供一种数据处理方法，所述数据处理方法应用于数据处理系统，所述数据处理系统包括数据压缩组件和服务协调组件；所述数据处理方法包括：通过所述数据压缩组件对满足数据压缩条件的历史数据进行压缩，并且通过所述服务协调组件禁止对正在压缩中的历史数据进行写入和/或读取；响应于所述历史数据的压缩完成，通过所述服务协调组件允许对压缩后的历史数据进行写入和/或读取。

根据本公开的实施例，提供一种存储有计算机程序的计算机可读存储介质，当所述计算机程序在被处理器执行时实现如上所述的数据处理方法。

根据本公开的实施例，提供一种计算装置，所述计算装置包括：处理器；存储器，存储有计算机程序，当所述计算机程序被处理器执行时，实现如上所述的数据处理方法。

根据本公开的实施例，提供一种数据处理系统，所述数据处理系统包括：数据压缩组件，被配置为对满足数据压缩条件的历史数据进行压缩；服务协调组件，被配置为禁止对正在压缩中的历史数据进行写入和/或读取；响应于所述历史数据的压缩完成，允许对压缩后的历史数据进行写入和/或读取。

采用根据本公开的实施例的数据处理方法及数据处理系统，至少可以实现以下技术效果：可以依据新能源设备的数据使用特点(例如，由于电网安全检查、现场维护等需要长时间断网，导致数据延迟补录等)，在对数据进行选择性压缩的同时保证数据的可用性，例如，能够对海量的历史数据进行合理地压缩以降低占用的存储空间，同时还保证非压缩中的历史数据的读写可用性；还可以允许对压缩后的数据进行写入和读取，例如，可以对压缩后的数据进行补录和检索。

附图说明

通过下面结合附图进行描述，本公开的上述和其他目的和特点将会变得更加清楚。

图1是根据本公开的实施例的数据处理系统的示意图。

图2是根据本公开的实施例的数据处理方法的流程图。

图3是根据本公开的实施例的数据压缩过程的流程图。

图4是根据本公开的另一实施例的数据处理方法的流程图。

图5是根据本公开的另一实施例的数据处理方法的流程图。

图6是根据本公开的实施例的数据写入过程的流程图。

图7是根据本公开的实施例的数据读取过程的流程图。