[发明专利]自定义的可序列化的数据结构、hadoop集群、服务器及其应用方法

摘要

一种自定义的可序列化的数据结构、hadoop集群、服务器及其应用方法，自定义的可序列化的数据结构包括数据内容与标记值类、标志值结构类、数据映射关系类，在数据的前端设置有数据源的标记内容；数据内容与标记值类用于解析数据标记值和数据内容；标记值结构类用于标记内容的读取、识别、写入；数据映射关系类用于储存和加载数据标记内容与不同数据的源的映射关系，以及数据标记内容与对应的Protobuf编译之后的类的映射关系。所述hadoop集群包括自定义的可序列化的数据结构，所述服务器包括hadoop集群。本发明自定义的数据结构既有Protobuf的特性，又有Writable的特性。同时也实现了在Hive中的反序列化接口，可以使其在Hive中的使用比一般的文本数据更加的方便、快捷，减少错误。

主权项

1.一种自定义的可序列化的数据结构存储装置，其特征在于，包括数据内容与标记值类、标志值结构类、数据映射关系类，数据内容与标记值类、标志值结构类、数据映射关系类都使用Java语言实现，在数据的前端设置有数据源的标记内容；所述数据内容与标记值类用于解析数据标记值和数据内容；所述标志值结构类用于标记内容的读取、识别、写入，通过扫描xml格式的文件，加载一份对应的标记值，存储在内存中，后使用该标志值结构类的标记数据，用作数据识别；所述数据映射关系类用于储存和加载数据标记内容与不同数据的源的映射关系，以及数据标记内容与对应的Protobuf编译之后的类的映射关系。