[发明专利]一种数据获取方法及设备

权利要求书

1.一种数据获取方法，其特征在于，包括：

S1，将所设置的数据查询条件和对ElasticSearch返回的数据进行解析的规则提供给预定义的数据获取组件；

S2，调用所述数据获取组件向搜索引擎ElasticSearch发起滚屏查询请求，获取经过解析的搜索引擎ElasticSearch对所述滚屏查询请求的返回结果；

其中，所述滚屏查询请求携带的信息包括：开发人员设置的查询条件、请求上下文ID、请求上下文的有效时间以及offset查询参数。

2.根据权利要求1所述的方法，其特征在于，在步骤S1之前还包括：

S0，实现基于ElasticSearch ScrollAPI的数据获取组件。

3.根据权利要求2所述的方法，其特征在于，所述数据获取组件具体包括：准备查询接口类和滚屏查询组件类；

所述准备查询接口类包括prepare方法和parseResult方法，所述prepare方法用于向数据获取组件提供开发人员设置的查询条件，所述parseResult方法用于向数据获取组件提供开发人员设置的对从搜索引擎ElasticSearch中获取到的数据的解析规则；

所述滚屏查询组件类包括doScrollSearch方法，所述doScrollSearch方法用于以ElasticSearch Scroll API的方式获取搜索引擎ElasticSearch中的数据，所述doScrollSearch方法的入参为所述准备查询接口类的实例。

4.根据权利要求3所述的方法，其特征在于，步骤S1进一步包括：

S11，将所述准备查询接口类实例化，获得所述准备查询接口类的一个实例对象；

S12，将所述实例对象传递给所述滚屏查询组件的doScrollSearch方法。

5.根据权利要求3所述的方法，其特征在于，步骤S2进一步包括：

S21，在所述doScrollSearch方法中回调所述prepare方法获取开发人员设置的查询条件，向搜索引擎ElasticSearch发起滚屏查询请求；

S22，当获取到搜索引擎ElasticSearch对所述滚屏查询请求的返回结果时，回调所述parseResult方法对所述返回结果进行解析，获得经过解析的ElasticSearch数据；

S23，返回所述经过解析的ElasticSearch数据。

6.根据权利要求5所述的方法，其特征在于，在步骤S21中向搜索引擎ElasticSearch发起滚屏查询请求的步骤之后，还包括：

使搜索引擎ElasticSearch按照offset字段对数据进行升序排序。

7.根据权利要求5所述的方法，其特征在于，步骤S22还包括：

若获知搜索引擎ElasticSearch根据所述请求上下文ID获取不到该请求上下文所对应的数据，则向搜索引擎ElasticSearch重新发起新的滚屏查询请求。

8.一种数据获取设备，其特征在于，包括存储器、处理器、以及总线，

所述处理器和存储器通过所述总线完成相互间的通信；

所述存储器存储有可被所述处理器执行的程序指令，所述处理器调用所述存储器中的程序指令，以执行如权利要求1至7任一所述的方法。

9.一种非暂态计算机可读存储介质，其特征在于，所述非暂态计算机可读存储介质存储计算机指令，所述计算机指令使所述计算机执行如权利要求1至7任一所述的方法。