[发明专利]一种基于二值化数据转换的大数据存储方法和装置

权利要求书

1.一种基于二值化数据转换的大数据存储方法，其特征在于，包括：

S1、利用预设的大数据采集方法进行数据采集处理，并构成第一数据集；

S2、对所述第一数据集进行数据提取处理，以将所述第一数据集中的二值化数据提取出来，从而构成第二数据集；其中，所述第二数据集中的数据全部为二值化数据，所述二值化数据的所有数值只有两种取值可能；

S3、根据预设的数据抽取方法，从所述第二数据集中抽取一号二值化数据；其中，所述一号二值化数据的数值位置的数量为第一数量；

S4、根据预设的哈希算法，对所述一号二值化数据进行哈希计算，以得到一号哈希值，并删除所述一号二值化数据；其中，所述一号哈希值由第二数量的二进制字符构成，所述第二数量大于所述第一数量；

S5、对所述一号哈希值进行字符提取处理，以将所述一号哈希值中指定位置的字符提取出来，以构成一号字符串；其中，所述指定位置的数量为所述第一数量；

S6、从所述第二数据集中提取出二号二值化数据，并建立所述二号二值化数据与所述一号哈希值的关联关系；其中，所述二号二值化数据与所述一号字符串相同；

S7、根据预设的哈希算法，对所述一号哈希值进行哈希计算，以得到二号哈希值，并删除所述二号二值化数据；其中，所述二号哈希值由第二数量的二进制字符构成；

S8、对所述二号哈希值进行字符提取处理，以将所述二号哈希值中所述指定位置的字符提取出来，以构成二号字符串；

S9、从所述第二数据集中提取出i号二值化数据，并建立所述i号二值化数据与i-1号哈希值的关联关系；其中，所述i号二值化数据与i-1号字符串相同；其中，i为大于等于3且小于等于n的整数，n为预设的大于等于3的整数；

S10、根据预设的哈希算法，对所述i-1号哈希值进行哈希计算，以得到i号哈希值，并删除所述i号二值化数据；其中，所述i号哈希值由第二数量的二进制字符构成；

S11、对所述i号哈希值进行字符提取处理，以将所述i号哈希值中所述指定位置的字符提取出来，以构成i号字符串；其中，i为大于等于3且小于等于n的整数，n为预设的大于等于3的整数；

S12、判断是否能从所述第二数据集中提取出i+1号二值化数据，以使所述i+1号二值化数据与所述i号字符串相同；

S13、若不能从所述第二数据集中提取出i+1号二值化数据，则将所述i号哈希值和所述指定位置作为i个二值化数据的载体，并存储所述i号哈希值和所述指定位置。

2.根据权利要求1所述的基于二值化数据转换的大数据存储方法，其特征在于，所述根据预设的数据抽取方法，从所述第二数据集中抽取一号二值化数据的步骤S3，包括：

采用随机抽取的方法，从所述第二数据集中抽取一号二值化数据；

所述从所述第二数据集中提取出二号二值化数据，并建立所述二号二值化数据与所述一号哈希值的关联关系的步骤S6，包括：

以所述一号字符串为命中目标在所述第二数据集中进行搜索，并在命中一个目标后停止搜索，从而在所述第二数据集中抽取二号二值化数据，并建立所述二号二值化数据与所述一号哈希值的关联关系；

所述从所述第二数据集中提取出i号二值化数据，并建立所述i号二值化数据与i-1号哈希值的关联关系的步骤S9，包括：

以所述i-1号字符串为命中目标在所述第二数据集中进行搜索，并在命中一个目标后停止搜索，从而在所述第二数据集中抽取i号二值化数据，并建立所述i号二值化数据与i-1号哈希值的关联关系。

3.根据权利要求1所述的基于二值化数据转换的大数据存储方法，其特征在于，所述根据预设的哈希算法，对所述一号哈希值进行哈希计算，以得到二号哈希值，并删除所述二号二值化数据的步骤S7中的哈希算法为SHA3-256算法；

所述根据预设的哈希算法，对所述一号二值化数据进行哈希计算，以得到一号哈希值，并删除所述一号二值化数据的步骤S4中的哈希算法输出的二进制字符的位数小于或者等于256；

所述根据预设的哈希算法，对所述i-1号哈希值进行哈希计算，以得到i号哈希值，并删除所述i号二值化数据的步骤S10中的哈希算法输出的二进制字符的位数大于或者等于256。