[发明专利]基于大数据的存储节点空间容量和安全性评估方法

说明书

本发明涉及基于大数据的存储节点空间容量和安全性评估方法，包括确定可用的云端节点，并获取云端用于存储大数据的节点的存储介质类型；基于不同的节点存储介质类型，通过查找表获得其读写擦除使用次数的上限值TT以及可用存储空间，并获得各个节点的存储介质的不同区块的已读写擦除次数ERW以及安全系数SE和故障异常概率FA；评估各个节点的安全性能；基于计算的节点k的安全性能的数值，按照递减次序进行排序；将排序的节点对应的可用存储空间发送到安全存储控制器；当该方法最终确定使用节点k中的区块j时，将该区块j的已读写擦除次数ERW增加1。该方法能够针对用户所产生或待存储和处理的大数据，基于各存储节点的属性，对各存储节点的节点空间容量和安全性进行评估，提高各存储节点的节点空间容量和安全性进行评估的准确性从而实现了大数据的安全存储。

技术领域

本发明涉及电数据处理领域，并且更具体而言，涉及一种基于大数据的存储节点空间容量和安全性评估方法。

背景技术

随着计算机技术的发展和网络技术的进步，人类的工作和生活发生了巨大的变化，现在人们每天都在接触、读取、存储、处理的信息，诸如通过移动终端进行社会交往、获取新闻、查询知识元素、购物、娱乐等，这使得创造的数据量成倍地增加。由此形成的海量数据被称为大数据。大数据在给用户带来便利的同时，也带来了一些安全隐患。诸如，不法分子对用户进行大数据处理和分析后会得到用户的隐私信息，例如电商网站会知道用户的购物习惯，社交软件提供商会知道用户的社交关系和好友联络情况，搜索引擎提供商会知道用户的检索习惯和关注点；另外，当用户的终端接入网络进行访问时，其网络信息数据遭到不法之徒和黑客的蓄意攻击和破坏，用户重要信息会遭到泄露，这就会给计算机用户带来利益损失。而大数据技术与云技术的发展密切相关，通过利用云技术来加强和提高网络信息数据存储的安全性，作为越来越受重视的焦点。因此利用云技术来对大数据进行备份和存储是可取的手段。

然而，现有技术中针对云存储，主要关注于负载的均衡，即如何把负载合理地分布到各个节点；或者进一步地，通过对数据进行加密而分布式存储，即提高数据本身的可靠性来增强安全性。然而较少有现有技术关注针对用户所产生或待存储和处理的大数据，以及各存储节点的属性的特点，例如不同存储节点的存储介质特性(磁性、半导体、相变)以及物理操作参数(例如擦写次数，诸如损毁之类的故障发生的几率)和安全特性(例如被攻击或破坏的几率)，给大数据的安全存储带来的隐患；同时现有技术中，通过将大数据进行本地和云端分布式存储，然而黑客或不法分子通过窃取本地或云端中任一个的部分数据，就可以通过解密(有的用户大数据甚至无加密环节，对应地，被直接)获取大数据信息，从而导致用户隐私或者个人信息的泄露。如何合理地基于各存储节点的属性，将大数据安全地、可靠地、合理地、不可由黑客截取部分进而还原地存储到该节点，使得该大数据不受攻击影响，不受节点故障或物理变化的影响，这是本领域中没有披露但有待解决的问题。

发明内容

本发明的目的之一是提供一种基于大数据的存储节点空间容量和安全性评估方法，其能够针对用户所产生或待存储和处理的大数据，基于各存储节点的属性，将大数据安全地、可靠地、合理地、不可由黑客截取部分进而还原地存储到该节点，使得该大数据不受攻击影响，不受节点故障或物理变化的影响，从而实现了大数据的安全存储。

本发明为解决上述技术问题而采取的技术方案为：一种基于大数据的存储节点空间容量和安全性评估方法，包括：步骤S1，接收待存储的大数据，确定待存储的大数据的大小，并确认其完整性和有效性；步骤S2，评估本地存储空间；步骤S3，判断大数据对象的类型，选择其对应的策略；步骤S4，根据对应的策略，对大数据进行编码和分块；步骤S5，评估节点空间的容量和安全性；步骤S6，根据分块以及安全性和容量，对大数据进行存储。