[发明专利]一种基于Memcached的大数据缓存交互式查询方法

权利要求书

1.一种基于Memcached的大数据缓存交互式查询方法，其步骤包括：

1)将Memcached驱动程序放入Spark SQL的类路径中，并引入到Spark SQL的SQLContext中；所述Memcached驱动程序包括DefaultSource、MemcachedRelation和MemcachedRDD，其中所述DefaultSource实现了Spark中的RelationProvider，用于创建Spark SQL数据源中的MemcachedRelation；所述MemcachedRelation继承并实现了Spark中的BaseRelation和TableScan，用于根据用户需求实现Spark SQL与Memcached服务器之间的交互；所述MemcachedRDD为Spark处理Memcached服务器中的数据提供接口；

2)根据Memcached服务器中缓存数据的结构指定表的数据模式，调用SQLContext的sql()方法，提交CREATE TABLE语句创建Spark SQL数据源中的表；

3)调用SQLContext的sql()方法，提交SQL INSERT语句，在Spark SQL中根据上述创建的表并调用Memcached API将数据写入Memcached服务器中；

4)调用SQLContext的sql()方法，提交SQL SELECT语句，在Spark SQL中根据上述创建的表并调用Memcached API查询Memcached服务器中的缓存数据。

2.如权利要求1所述的方法，其特征在于，步骤1)中所述Memcached驱动程序表现为一个Java程序包的形式。

3.如权利要求1所述的方法，其特征在于，步骤1)中所述MemcachedRelation还用于存放数据模式的映射和scan数据的规则。

4.如权利要求1所述的方法，其特征在于，步骤1)中所述MemcachedRDD还定义了数据在模式定义下类型的强制转换。

5.如权利要求1所述的方法，其特征在于，步骤2)中所述数据模式包括数据表的表名及所属类型、列的列名，且每一列需要指定列名以及值类型。

6.如权利要求1所述的方法，其特征在于，步骤2)中在创建Spark SQL数据源中的表时，通过USING参数指定采用的Memcached驱动。

7.如权利要求1所述的方法，其特征在于，步骤2)中在创建Spark SQL数据源中的表时，通过OPTIONS参数指定Memcached服务器的参数；所述Memcached服务器的参数包括服务器地址、主机列表和数据列存储在Memcached中key的前缀。