[发明专利]用于传输数据的方法和设备

说明书

技术领域

本发明涉及通信领域，更具体地涉及一种用于传输数据的方法和设备。

背景技术

随着通信技术的发展、和电子设备的广泛使用，日益需要对海量数据进行传输和存储。为此，提出了分布式文件系统(Distributed File System，DFS)。分布式文件系统通常包括管理节点、和至少一个存储节点。由该管理节点进行统一管理，例如管理文件在存储节点上的存储、和客户端对文件的访问等。分布式文件系统具有集中访问、简化操作、和提高文件存取效率的优点。

Hadoop是一套致力于海量数据处理的大规模互联网应用的软件基础设施，被设计用来在普通机器组成的集群上完成分布式应用的框架。作为分布式文件系统的示例，Hadoop分布式文件系统(Hadoop Distributed File System，HDFS)是Hadoop框架下的分布式文件系统。HDFS有着高容错性的特点，被设计成可以部署在低廉的硬件上，并且提供高吞吐量来访问应用程序的数据，适合那些有超大数据集的应用程序。

分布式文件系统的客户端通过与管理节点的通信来进行数据的写入和读取。然而，分布式文件系统原生加密传输存储支持不够。当要提供诸如异地因特网数据中心(Internet data center，IDC)、存储级别租赁等对外服务时，分布式文件系统存在数据安全性不足的缺点。此外，分布式文件系统是基于自定义的基于传输控制协议/因特网协议(Transmission Control Protocol/Internet Protocol，TCP/IP)的分布式远程过程呼叫(Remote Procedure Call，RPC)协议通信，无法提供良好的传输层安全/安全套接层(Transport Layer Security/Secure Sockets Layer，SSL/TLS)加解密支持。因此，需要提供理想的数据加解密服务，从而在分布式文件系统中提供安全的数据传输和存储。

发明内容

本发明实施例提供了在分布式文件系统中用于传输数据的方法和设备，能够提高数据在传输过程中的安全性，同时保持良好的数据传输性能。

一方面，提供了一种用于传输数据的方法，该方法适用于分布式文件系统，该分布式文件系统包括管理节点、和至少一个存储节点，该管理节点用于管理文件在存储节点上的存储、和客户端对文件的访问，所述用于传输数据的方法包括：客户端通过与管理节点交互来确定用于存储该数据的存储节点；客户端生成对所述数据进行加密的密钥，利用该密钥对数据进行加密，并将已加密数据传输到所述用于存储该数据的存储节点；通过密钥传送步骤将密钥传送到存储节点，该密钥传送步骤包括：客户端对所述密钥进行加密而得到已加密密钥，并将该已加密密钥传送到管理节点；管理节点对该已加密密钥进行解密而得到所述密钥，并将该密钥传送到所述用于存储该数据的存储节点。

另一方面，提供了一种用于传输数据的设备，该设备适用于分布式文件系统，该分布式文件系统包括管理节点、和至少一个存储节点，该管理节点用于管理文件在存储节点上的存储、和客户端对文件的访问，所述用于传输数据的设备包括：确定单元，客户端利用其与管理节点交互来确定用于存储该数据的存储节点；生成单元，客户端利用该生成单元生成对所述数据进行加密的密钥；传输单元，用于利用该密钥对数据进行加密，并将已加密数据传输到所述用于存储该数据的存储节点；密钥传送单元，用于将密钥传送到存储节点，该密钥传送单元包括：第一部件，客户端利用该第一部件对所述密钥进行加密而得到已加密密钥，并将该已加密密钥传送到管理节点；第二部件，管理节点利用该第二部件对该已加密密钥进行解密而得到所述密钥，并将该密钥传送到所述用于存储该数据的存储节点。

在本发明实施例的上述技术方案中，通过以加密方式传输文件，并通过对密钥加密来在另外的路径中传输密钥，能够提高数据在传输过程中的安全性，同时保持良好的数据传输性能。

附图说明

为了更清楚地说明本发明实施例的技术方案，下面将对实施例或现有技术描述中所需要使用的附图作简单地介绍，显而易见地，下面描述中的附图仅仅是本发明的一些实施例，对于本领域普通技术人员来讲，在不付出创造性劳动的前提下，还可以根据这些附图获得其它的附图。

图1示意性地图示了分布式文件系统的架构的框图；

图2图示了根据本发明实施例的用于传输数据的方法的流程图；

图3图示了根据本发明实施例的在数据被加密存储时的数据读取方法的流程图；