[发明专利]数据处理方法、装置、设备及计算机存储介质

说明书

本申请涉及计算机数据处理技术领域，提供一种数据处理方法、装置、设备及计算机可读存储介质，该方法包括：获取待处理的目标数据，所述目标数据包括若干数据项；基于聚类算法模型，将所述若干数据项分类到至少一个数据组中；根据每个所述数据组中当前包含的数据项，确定每个所述数据组的当前中心值；获取每个所述数据组的历史中心值，根据每个所述数据组的所述当前中心值和所述历史中心值，确定目标数据组；将所述目标数据组内的数据项存储至目标存储地址。能够保留历史数据的同时减少数据变化时占用的存储空间。本申请还涉及区块链技术，目标数据组可以存储在区块链中。

技术领域

本申请涉及计算机数据处理技术领域，尤其涉及一种数据处理方法、装置、设备及计算机可读存储介质。

背景技术

随着数据的大爆发以及数据传输速率的加快，数据量越来越多，需要存储的存储量也越来越大，很多数据间隔一定时间进行全量储存所占用的存储空间很多，而删除历史数据又损失了数据的完整性，或在用户想查找历史数据时却无法找回，针对每隔一定时间会变化的数据，但是大部分数据都是细微变化的数据，如用户画像中计算的标签值，不同时间段的数据值都是不同的，但是大部分的数据仍相差不大，在全量储存的时候就面临占用空间很大的问题，而历史数据又有数据价值无法删去。

发明内容

本申请的主要目的在于提供一种数据处理方法、装置、设备及计算机可读存储介质，旨在节约数据存储所需要的存储空间。

第一方面，本申请提供一种数据处理方法，所述数据处理方法包括以下步骤：

获取待处理的目标数据，所述目标数据包括若干数据项；

基于聚类算法模型，将所述若干数据项分类到至少一个数据组中；

根据每个所述数据组中当前包含的数据项，确定每个所述数据组的当前中心值；

获取每个所述数据组的历史中心值，根据每个所述数据组的所述当前中心值和所述历史中心值，确定目标数据组；

将所述目标数据组内的数据项存储至目标存储地址。

第二方面，本申请还提供一种数据处理装置，所述数据处理装置包括：

数据获取模块，用于获取待处理的目标数据，所述目标数据包括若干数据项；

数据项分类模块，用于基于聚类算法模型，将所述若干数据项分类到至少一个数据组中；

中心值确定模块，用于根据每个所述数据组中当前包含的数据项，确定每个所述数据组的当前中心值；

目标数据组确定模块，用于获取每个所述数据组的历史中心值，根据每个所述数据组的所述当前中心值和所述历史中心值，确定目标数据组；

数据项存储模块，用于将所述目标数据组内的数据项存储至目标存储地址。

第三方面，本申请还提供一种计算机设备，所述计算机设备包括处理器、存储器、以及存储在所述存储器上并可被所述处理器执行的计算机程序，其中所述计算机程序被所述处理器执行时，实现如上述的数据处理方法的步骤。

第四方面，本申请还提供一种计算机可读存储介质，所述计算机可读存储介质上存储有计算机程序，其中所述计算机程序被处理器执行时，实现如上述的数据处理方法的步骤。

本申请提供一种数据处理方法、装置、设备及计算机可读存储介质，本申请通过获取待处理的目标数据，所述目标数据包括若干数据项；基于聚类算法模型，将所述若干数据项分类到至少一个数据组中；根据每个所述数据组中当前包含的数据项，确定每个所述数据组的当前中心值；获取每个所述数据组的历史中心值，根据每个所述数据组的所述当前中心值和所述历史中心值，确定目标数据组；将所述目标数据组内的数据项存储至目标存储地址。由于只存储目标数据中部分的数据项，在保留历史数据以及数据连续性的同时，减轻了服务器的存储压力，释放更多的存储空间。