[发明专利]数据获取方法、装置和系统

权利要求书

1.一种数据获取方法，包括：

接收发送端发送的数据获取请求；

解析所述数据获取请求以确定所接收的数据获取请求的类型；

创建与所述数据获取请求的类型相匹配的数据获取任务；以及

执行所述数据获取任务，并向目的端反馈所述数据获取任务的处理结果。

2.根据权利要求1所述的方法，其中，所述数据获取请求的类型包括推动类型；

所述创建与所述数据获取请求的类型相匹配的任务，包括：

响应于所述数据获取请求的类型为推动类型，创建多线程任务，其中，所述多线程任务的线程数量基于所述数据获取请求所请求获取的数据类型的数量确定；

所述执行所述任务，并向目的端反馈任务处理结果，包括：

使所述多线程任务中的每个线程执行与该线程对应的数据获取任务；

响应于所述多线程任务中的各线程均执行完成，向所述发送端反馈所述数据获取任务的处理结果。

3.根据权利要求1或2所述的方法，其中，所述数据获取请求所请求获取的数据通过如下的数据存储步骤进行存储：

响应于接收到数据存储请求，确定所述数据存储请求所指示的待存储数据的数据类型；

将所述待存储数据添加至预先创建的、与所确定的数据类型相对应的消息队列的队尾。

4.根据权利要求3所述的方法，其中，所述数据存储步骤还包括：

响应于消息队列所存储的数据的数量等于所述消息队列预先设置的长度，将所述消息队列队首数据移除，并将所移除的数据作为历史数据存储至预先设置的数据库中。

5.根据权利要求4所述的方法，其中，所述执行所述数据获取任务，并向目的端反馈所述数据获取任务的处理结果，包括：

基于所述数据获取请求所请求数据的实时性确定所请求数据的存储位置；

从所确定的存储位置获取与所述数据获取任务相应的数据，并向目的端反馈所述数据获取任务的处理结果。

6.一种数据获取系统，包括：

任务调度层，用于接收发送端发送的数据获取请求，解析所述数据获取请求以确定所接收的数据获取请求的类型；

任务处理层，用于创建与所述数据获取请求的类型相匹配的数据获取任务，执行所述数据获取任务，并向目的端反馈所述数据获取任务的处理结果。

7.根据权利要求6所述的数据获取系统，其中，所述任务处理层还用于：

响应于所述数据获取请求的类型为推动类型，创建多线程任务，其中，所述多线程任务的线程数量基于所述数据获取请求所请求获取的数据类型的数量确定；

所述多线程任务中的每个线程执行与该线程对应的数据获取任务；以及

响应于所述多线程任务中的各线程均执行完成，向所述发送端反馈所述数据获取任务的处理结果。

8.根据权利要求6或7所述的系统，其中，所述系统还包括：

数据分发层，用于响应于接收到数据存储请求，确定所述数据存储请求所指示的待存储数据的数据类型，以及将所述待存储数据添加至预先创建的、与所确定的数据类型相对应的消息队列的队尾。

9.根据权利要求8所述的系统，其中，所述数据分发层进一步用于：

响应于消息队列所存储的数据的数量等于所述消息队列预先设置的长度，将所述消息队列队首数据移除，并将所移除的数据作为历史数据存储至预先设置的数据库中。

10.根据权利要求9所述的系统，其中，所述任务处理层进一步用于：

基于所述数据获取请求所请求数据的实时性确定所请求数据的存储位置；以及

从所确定的存储位置获取与所述数据获取任务相应的数据，并向目的端反馈所述数据获取任务的处理结果。