[发明专利]数据查询方法和装置

说明书

技术领域

本发明涉及海量数据查询技术领域，特别涉及一种数据查询方法和装置。

背景技术

随着数据业务的增多，如何高效率的进行数据查询的问题越来越被用户所重视。现有技术中提供了一种分布式查询技术，将一个大的查询任务分解为多个子查询任务，每个子查询任务分步去执行查询，最终得到查询结果。

现有的数据查询方法中，有些任务可以并行，有些则需要有先后依赖，对于相互依赖的任务，任何一个任务失败，都将导致整个工作流的失败，查询也就失败了，任务变多了，失败的概率也随之增加。

发明内容

本发明针对上述问题，提出了一种数据查询方法和装置。

在一个方面，本发明提供了一种数据查询方法，所述方法包括：

获取数据查询的请求，并将所述数据查询的请求分解为多个子查询任务，其中，所述多个子查询任务组成一个任务流；

在所述任务流的执行过程中，针对所述每个子查询任务，启动多个备份进程或线程进行相同的查询；

根据所述每个子查询任务的查询结果，得到所述数据查询的结果集。

在另一个方面，本发明提供了一种数据查询装置，所述装置包括：

任务分解模块，用于获取数据查询的请求，并将所述数据查询的请求分解为多个子查询任务，其中，所述多个子查询任务组成一个任务流；

子任务查询模块，用于在所述任务流的执行过程中，针对所述每个子查询任务，启动多个备份进程或线程进行相同的查询；

数据获取模块，用于根据所述每个子查询任务的查询结果，得到所述数据查询的结果集。

本发明提供的技术方案的有益效果包括：对每个子查询任务启动多个线程或进程进行相同的查询，只要其中一个线程或进程执行成功，就能获得数据查询结果，从而提高了查询执行的可靠性，提高了数据查询的成功率和效率。

附图说明

下面将参照附图描述本发明的具体实施例，其中：

图1是本发明实施例1中提供的一种数据查询方法的流程图；

图2是本发明实施例2中提供的一种数据查询方法的流程图；

图3是本发明实施例2中提供的一种任务分解示意图；

图4是本发明实施例2中提供的一种多线程启动示意图；

图5是本发明实施例3中提供的一种数据查询装置的示意图；

图6是本发明实施例3中提供的另一种数据查询装置的示意图。

具体实施方式

为了使本发明的技术方案及优点更加清楚明白，以下结合附图对本发明的示例性实施例进行进一步详细的说明，显然，所描述的实施例仅是本发明的一部分实施例，而不是所有实施例的穷举。

本实施例中所涉及的冗余执行可靠性查询技术是针对一个查询会启动多进程或线程做同样的工作，如果其中一个线程或进程出故障，则其他正确执行的进程或线程仍然可以保证返回正确的结果，提高查询可靠性。

线程是程序中一个单一的顺序控制流程。在单个程序中同时运行多个线程完成不同的工作，称为多线程。

进程是一个具有一定独立功能的程序关于某个数据集合的一次运行活动。它是操作系统动态执行的基本单元，在传统的操作系统中，进程既是基本的分配单元，也是基本的执行单元。

实施例1

参见图1，本实施例中提供了一种数据查询方法，所述方法包括：

101、获取数据查询的请求，并将所述数据查询的请求分解为多个子查询任务，其中，所述多个子查询任务组成一个任务流；

102、在所述任务流的执行过程中，针对所述每个子查询任务，启动多个备份进程或线程进行相同的查询；

103、根据所述每个子查询任务的查询结果，得到所述数据查询的结果集。

在另一实施例中，所述针对每个子查询任务，启动多个备份进程或线程进行相同的查询，包括：

当所述子查询任务对应的查询数据是多副本数据时，针对不同的副本启动多个备份进程或是线程进行查询。

在另一实施例中，所述针对每个子查询任务，启动多个备份进程或线程进行相同的查询，包括：

当所述子查询任务对应的查询数据是单副本数据时，针对同一个副本启动多个备份进程或是线程进行查询。

可选地，所述针对每个子查询任务，启动多个备份进程或线程进行相同的查询之后，还包括：

当所述多个备份进程或线程执行数据查询失败后，如果所述数据查询失败的原因是数据连接失败，则采用重试机制，尝试重新建立数据连接。