[发明专利]数据处理方法、装置、电子设备及存储介质

说明书

本发明公开了一种数据处理方法、装置、电子设备及存储介质，其中，该方法包括：接收数据查询请求，所述查询请求包括：时间信息、查询内容；对所述数据查询请求进行泛化处理，并根据预先存储的历史查询记录信息判断泛化后的查询请求是否已经存在；响应于判断结果为泛化后的查询请求存在、且与该查询请求对应的指标数据存在，根据所述指标数据和所述数据查询请求返回与所述时间信息对应的查询数据，其中，所述指标数据对应于所述查询请求中的查询内容。通过本发明，可以减少前后端开发人员沟通配合，提高开发效率，节约开发成本，并且，保留低频的历史查询能力，从而可以提高用户体验。

技术领域

本发明涉及计算机技术领域，具体涉及一种数据处理方法、装置、电子设备及存储介质。

背景技术

在大数据解决方案中，数据可视化是挖掘数据价值，提升最终用户体验的重要组成部分。一般情况下，数据可视化开发，需要后端开发人员提供相应的数据查询接口给前端开发人员。理想情况是后端服务提供数据明细给前端服务进行自由定制的可视化方案，但是在大数据场景下，提供大量的明细数据会因为传输过慢，前端计算能力不足导致最终用户体验明显降低。

为了提高最终用户体验，目前传统的解决方案有两种。

第一种是即时计算，在数据存储的节点上进行高并发的即时计算从而实现语义丰富的查询接口，包括常见的基础算子，甚至允许在查询中内置自定义的脚本，以此实现接近全维度的即时数据查询能力。但是这种方式的查询性能依然随着数据规模的高速增长退化严重，毕竟存储节点计算有限，而且每次查询都要进行计算，重复计算过多，非常浪费计算资源，缓存层只能减轻不能避免此类浪费。

第二种是预计算，对原数据进行事先加工处理落地形成一系列数据量明显降低的指标数据再提供给前端服务查询。但是由于可视化所需查询维度各不相同，每一种查询都需要前后端沟通配合，开发效率低下，并且许多指标高度相似，后端需要进行大量重复工作。另外，对于指标生成之前的数据无法查询，历史数据查询虽然是相对低频的行为但并不是完全不会触发的查询行为。

发明内容

有鉴于此，本发明提供一种数据处理方法、装置、电子设备及存储介质，以解决上述提及的至少一个问题。

根据本发明的第一方面，提供一种数据处理方法，所述方法包括：

接收数据查询请求，所述查询请求包括：时间信息、查询内容；

对所述数据查询请求进行泛化处理，并根据预先存储的历史查询记录信息判断泛化后的查询请求是否已经存在；

响应于判断结果为泛化后的查询请求存在、且与该查询请求对应的指标数据存在，根据所述指标数据和所述数据查询请求返回与所述时间信息对应的查询数据，其中，所述指标数据对应于所述查询请求中的查询内容。

根据本发明的第二方面，提供一种数据处理装置，所述装置包括：

请求接收单元，用于接收数据查询请求，所述查询请求包括：时间信息、查询内容；

泛化处理单元，用于对所述数据查询请求进行泛化处理；

第一判断单元，用于根据预先存储的历史查询记录信息判断泛化后的查询请求是否已经存在；

查询单元，用于响应于判断结果为泛化后的查询请求存在、且与该查询请求对应的指标数据存在，根据所述指标数据和所述数据查询请求返回与所述时间信息对应的查询数据，其中，所述指标数据对应于所述查询请求中的查询内容。

根据本发明的第三方面，提供一种电子设备，包括存储器、处理器及存储在存储器上并可在处理器上运行的计算机程序，所述处理器执行所述程序时实现上述方法的步骤。

根据本发明的第四方面，提供一种计算机可读存储介质，其上存储有计算机程序，该计算机程序被处理器执行时实现上述方法的步骤。