[发明专利]数据存储方法、数据读取方法、装置和计算机设备

说明书

本申请涉及一种数据存储方法，包括：将目标数据划分得到多个数据段；当数据段中的有效数据单元的数量小于或等于存储数量阈值时，生成数据段中每个有效数据单元的单位存储数据，单位存储数据包括相应有效数据单元的位图索引和位图；将每个单位存储数据，按照位图索引顺序连续存储至相应数据段的存储段中，节约了存储空间。本申请还涉及一种数据读取方法，包括：获取目标单位存储数据所在存储段的存储段标识；读取存储段标识所对应的单位存储数据的数量和起始存储位置；当单位存储数据的数量小于或等于存储数量阈值时，则按照起始存储位置和目标单位存储数据的位图索引，从存储段读取目标单位存储数据的位图，大大提高了位图的计算效率。

技术领域

本申请涉及计算机技术领域，特别是涉及一种数据存储方法、数据读取方法、装置、计算机设备和存储介质。

背景技术

随着计算机技术的发展，需要经常对一些数据进行存储，但是当需要被存储的数据的数量较大时，会占用大量的存储空间。

因此，为了节约存储空间，传统的数据存储方法，将数据以位图的形式进行存储，一个数据只占用一位(bit)。虽然相对于直接对数据进行存储，节约了一定的存储空间，但是由于在对有效数据存储的同时，也会对大量的无效数据进行存储，仍然造成了存储空间的浪费。

发明内容

基于此，有必要针对上述技术问题，提供一种能够节约存储空间的数据存储方法、数据读取方法、装置、计算机设备和存储介质。

一种数据存储方法，所述方法包括：

将目标数据划分得到多个数据段,每个数据段包括预设数量的数据单元，每个数据单元包括多个数据位且每个数据单元的数据位数相同；

当数据段中的有效数据单元的数量小于或等于存储数量阈值时，则

生成数据段中每个有效数据单元的单位存储数据，单位存储数据包括相应有效数据单元的位图索引和位图；

将数据段中每个有效数据单元的单位存储数据，按照位图索引顺序连续存储至相应数据段的存储段中。

在其中一个实施例中，所述方法还包括：

获取数据段的数据分布疏密类型；

按照数据分布疏密类型选择数据段的数据存储方式；

当选择的数据存储方式为多位图存储方式时,则

比较数据段中的有效数据单元的数量和存储数量阈值的大小。

在其中一个实施例中，所述方法还包括：

当数据段中的有效数据单元的数量大于存储数量阈值时，则

将数据段中的全体数据单元以整体位图的存储方式存储至相应数据段的存储段。

在其中一个实施例中，所述方法还包括：

获取目标数据位在所属的位图中的偏移量；

获取目标数据位所属位图的位图索引；

根据偏移量和位图索引，计算目标数据位在存储段中的索引号。

在其中一个实施例中，数据单元是长整型数据，数据位数为64，预设数量为256，存储数量阈值取自(0,227]。

一种数据存储装置，所述装置包括：

数据划分模块，用于将目标数据划分得到多个数据段,每个数据段包括预设数量的数据单元，每个数据单元包括多个数据位且每个数据单元的数据位数相同；

数据生成模块，用于当数据段中的有效数据单元的数量小于或等于存储数量阈值时，则