[发明专利]一种导出数据的方法和系统

权利要求书

1.一种导出数据的方法，其特征在于，包括：

接收业务端发送的业务数据导出指令，所述业务端根据用户的业务数据需求生成该业务数据导出指令；

根据所述业务数据导出指令，查询业务端数据库的业务数据，并基于查询获得的业务数据生成业务数据文件；

将所述业务数据文件发送给用户。

2.根据权利要求1所述的方法，其特征在于，所述根据业务数据导出指令，查询业务端数据库的业务数据，并基于查询获得的业务数据生成业务数据文件包括：

根据所述业务数据导出指令，在任务池中添加对应的业务数据导出任务；

从任务池中抓取业务数据导出任务并执行，以查询业务端数据库的业务数据，并基于查询获得的业务数据生成业务数据文件。

3.根据权利要求2所述的方法，其特征在于，所述任务池中维护有每个业务数据导出任务的是否可执行状态，所述执行的业务数据导出任务是从任务池中抓取的可执行状态的业务数据导出任务；

所述方法还包括：

在任务池中添加业务数据导出任务后，将该业务数据导出任务设置为不可执行状态；

对任务池中设置为不可执行状态的业务数据导出任务执行下述步骤：

确定业务数据导出任务是否可以分解，若可以，则将该业务数据导出任务分解为多个子任务，将每个子任务分别作为新的业务数据导出任务添加到任务池，否则，将该业务数据导出任务更新为可执行状态。

4.根据权利要求1所述的方法，其特征在于，若指定业务数据导出指令，用于指示导出包括主表数据和从表数据的业务数据，

查询业务端数据库的业务数据包括：

在业务端数据库的主库或从库查询主表数据，在查询缓存中查询从表数据，若所述查询缓存中不存在该从表数据，则在业务端数据库的主库或从库查询该从表数据，所述查询缓存中预保存有所述业务端数据库的部分从表数据。

5.根据权利要求4所述的方法，其特征在于，所述查询缓存包括内存缓存和磁盘缓存，所述内存缓存中预保存有所述从表数据中的热数据，所述磁盘缓存中预保存有所述从表数据中的冷数据；

所述在查询缓存中查询从表数据包括：

在内存缓存中查询该从表数据，若所述内存缓存中不存在该从表数据，则在磁盘缓存中查询该从表数据。

6.根据权利要求2所述的方法，其特征在于，所述从任务池中抓取业务数据导出任务并执行，以查询业务端数据库的业务数据，并基于查询获得的业务数据生成业务数据文件包括：

根据所述抓取的业务数据导出任务的导出数据总量，将业务数据导出任务划分为多个批次执行，以逐批次查询业务端数据库的业务数据，并基于每个批次查询获得的业务数据生成业务数据文件。

7.根据权利要求6所述的方法，其特征在于，还包括：

在执行业务数据导出任务之前，统计业务数据导出任务的导出数据总量并记录；

在该业务数据导出任务的每批次的业务数据查询完成后，记录该批次的查询成功的业务数据量和查询失败的业务数据量；

其中，用户可通过业务端查看所述记录。

8.一种导出数据的系统，其特征在于，包括：业务端和数据导出端，所述数据导出端包括：

接收模块，用于接收业务端发送的业务数据导出指令，所述业务端根据用户的业务数据需求生成该业务数据导出指令；

执行模块，用于根据所述业务数据导出指令，查询业务端数据库的业务数据，并基于查询获得的业务数据生成业务数据文件；

发送模块，用于将所述业务数据文件发送给用户。

9.根据权利要求8所述的系统，其特征在于，所述执行模块还用于根据所述业务数据导出指令，在任务池中添加对应的业务数据导出任务；

从任务池中抓取业务数据导出任务并执行，以查询业务端数据库的业务数据，并基于查询获得的业务数据生成业务数据文件。