[发明专利]一种数据存储系统、方法及电子设备

说明书

本发明公开一种数据存储系统、方法及电子设备，涉及通信技术领域。所述数据存储系统包括云端、边缘运算模块和至少一组分布式存储单元；所述主控模组被配置为，获取所述数据存储模组的存储空间，基于所述存储空间信息对所述数据存储模组进行数据块存储单元划分，确定所述数据块存储单元和存储数据的对应关系；在接收所述边缘运算模块发送的数据读写请求后，基于所述数据块存储单元和存储数据的对应关系确定目标存储位置，将所述数据读写请求对应的目标数据写入或读出所述目标存储位置，将所述目标存储位置和所述目标数据保存在所述对应关系中。本发明提供的数据存储系统用于实现对数据的快速存储，降低最终上传云端服务器的数据量。

技术领域

本发明涉及通信技术领域，尤其涉及一种数据存储系统、方法及电子设备。

背景技术

随着云计算、边缘计算和物联网技术的发展，基于物联网终端的终端数据量不断增加，在存储和运算方面所需要的资源不断增加，导致云端存储和计算负荷较大，特别是对于数据存储部分，由于数据量的指数级增加，其中，包括部分临时数据，导致云端存储的数据负荷较大，增加了数据存储和管理成本。

目前，对于云端数据存储的技术处理方式包括：对数据边缘计算完成后，将边缘运算的各种数据全部发送至云端，云端将数据进行保存。最终数据存储可以使用以磁盘阵列为存储设备的集中存储，还可以使用以HDFS等为代表的分布式存储等技术方式。

其中，以磁盘阵列为存储设备的集中存储方式的具体架构为：磁盘阵列端将分区挂载到云端的各个服务器，然后云端的各个服务器将数据按照指定的格式存储到挂载的设置中。但是，该模式对数据进行集中管理，安全风险较大，并且，磁盘阵列设备的成本较高，同时，在云计算场景下，磁盘阵列存储不够灵活，部署成本较高。

对于以HDFS等为代表的分布式存储技术，是通过将大量低端廉价服务器进行集群管理，将数据分散的存储在服务器集群的各个子服务器磁盘中，同时为了可靠性，会将同一份数据保存在多个设备的多个分区中，将最终的数据检索表管理在相对集中存储在主服务器中，为了安全同时也会对主服务器进行多机热备。但是，该模式在服务器集群管理的情况下，为了数据安全会导致存储性能受到限制，并且，由于终端客户对于数据可靠性要求较高，因此服务器端为了保证数据的可靠性，会需要较多的成本进行维护，同时，由于集群管理，且集群中的子服务器可能在不同的地方，因此对于集群中设备之间的网络连接速度要求较高。

综上所述，当前的云端服务器在大数据场景下，需要较多资源和成本用于保存各类数据，降低了存储数据的稳定性和可靠性，提高了使用成本。

发明内容

本发明的目的在于提供一种边缘端的数据存储系统、方法及电子设备，用于解决当前的云端服务器在大数据场景下，需要较多资源和成本用于保存各类数据，降低了存储数据特别是边缘端的临时数据存储的稳定性和可靠性的问题。

第一方面，本发明提供一种数据存储系统，所述数据存储系统包括：云端、边缘运算模块和至少一组分布式存储单元；所述边缘运算模块一端和所述云端连接，另一端和所述分布式存储单元连接；

一组所述分布式存储单元包括两两相互连接的至少一个主控模组、至少一个主控备份模组、和至少两个数据存储模组；

所述主控模组被配置为，获取所述数据存储模组的存储空间，基于所述存储空间信息对所述数据存储模组进行数据块存储单元划分，确定所述数据块存储单元和存储数据的对应关系；

所述主控模组还被配置为，在接收所述边缘运算模块发送的数据读写请求后，基于所述数据块存储单元和存储数据的对应关系确定目标存储位置，将所述数据读写请求对应的目标数据写入或读出所述目标存储位置，将所述目标存储位置和所述目标数据保存在所述对应关系中；

所述主控模组还被配置为：将所述写入或读出的目标存储位置和所述目标数据发送至所述边缘运算模块，用以在所述边缘运算模块处理后，传输至所述云端或者再次存储到所述分布式存储单元。