[发明专利]一种基于HBase的物联网大数据存取方法

摘要

本发明一种基于HBase的物联网大数据存取方法属于物联网数据处理技术领域，特别是一种基于HBase数据库的物联网大数据存取方法。包括1）创建HBase表，每一种终端类型对应一张HBase表,将终端类型名作为HBase的表名，指定列族名称(Column Family)、列限定符名称(Column)和Region的拆分策略；2）将上报数据导入HBase表,设计了一套rowkey的生成方案；3）数据查询。本发明充分考虑了物联网应用领域特点和HBase列式存储的特性，实现了数据的高效存储，满足了用户不同应用场景下的需求，并有效地兼顾了系统的可扩展性和数据均衡。

主权项

一种基于HBase的物联网大数据存取方法，其特征在于，包括如下步骤：1）创建HBase表每一种终端类型对应一张HBase表,将终端类型名作为HBase的表名，指定列族名称Column Family、列限定符名称Column和Region的拆分策略；2）将上报数据导入HBase表在上报数据导入到HBase表的过程中，记录的rowkey生成方法和value的存储方法，包括如下步骤：2‑1) 将上报数据中的终端ID通过hashCode方法获取其hashcode值，对该hashcode值取模，获得一个rowkey前缀；2‑2) 根据上报数据的发送时间以倒排的形式，即Long类型的最大值减去当前时间的时间戳，生成rowkey的时间字段；2‑3) 将步骤2‑1）得到的rowkey前缀、经过Base64加密的终端ID字段、分隔符字段以及步骤2‑2）的倒排的时间字段共同组成每条数据的rowkey；2‑4) 固定列族名称，将上报数据中的指令编码cmdID作为列名，其余数据作为value存入到HBase中，即完成上报数据的导入；3）数据查询基于HBase的物联网大数据存取方法包括两种查询接口，即根据终端ID和时间范围获取该终端该时间范围内的所有按时间排序的数据和根据终端ID获取其当前状态数据信息。