[发明专利]数据库采集方法和装置

说明书

本发明公开了一种数据库采集方法和装置。其中，该方法包括：当采集线程的运行状态为空闲状态时，采集线程向采集调度模块登记空闲状态，采集线程为多个数据库采集线程中的任一个；接收采集调度模块分配的待采集任务，待采集任务为采集调度模块通过轮询采集任务队列，从采集任务队列中匹配的一条最远时间点采集任务；采集线程将运行状态更新为工作状态并执行待采集任务。根据本发明实施例提供的方法和装置，可以实现多数据库采集任务的及时处理，避免多任务处理时的任务积压。

技术领域

本发明涉及运营管理技术领域，尤其涉及数据库采集方法和装置。

背景技术

随着移动通信业务复杂度不断提高，业务系统日趋复杂，业务系统一般采用分域建设，每个域都会建设单独的数据库。这样，业务指标分布于各业务域的数据库中，而业务运营管理中心为实现对数据的采集，就需要连接多个数据库。

在面向多个数据库的数据采集过程中，通常针对每个数据库通过单独的程序处理对应的业务域的业务指标的采集，即每个进程负责一个数据库的信息采集，这样的配置方式虽然比较简单，但是大大增加了业务运营管理中心对数据库采集进程管理的复杂度。同时，单进程的处理很容易会产生采集任务积压，当某个采集任务耗时较长时，其后面的待采任务将得不到及时处理，导致数据采集延迟。

发明内容

本发明实施例提供一种数据库采集方法和装置，可以实现多数据库采集任务的及时处理，避免多任务处理时的任务积压。

根据本发明实施例的一方面，提供一种数据库采集方法，该方法包括：当采集线程的运行状态为空闲状态时，采集线程向采集调度模块登记空闲状态，采集线程为多个数据库采集线程中的任一个；接收采集调度模块分配的待采集任务，待采集任务为采集调度模块通过轮询采集任务队列并从采集任务队列中匹配到的一条最远时间点采集任务，最远时间点采集任务为采集任务队列中的如下采集任务：该采集任务自上一次运行时刻起，经该采集任务的采集时间间隔后的时刻不早于系统当前时刻并且距离系统当前时刻最远；采集线程将运行状态更新为工作状态并执行待采集任务。

根据本发明实施例的另一方面，提供一种数据库采集方法，该方法包括：获取登记为空闲状态的采集线程，采集线程为多个数据库采集线程中的任一个；轮询采集任务队列，从采集任务队列中匹配一条最远时间点采集任务，最远时间点采集任务为采集任务队列中的如下采集任务：该采集任务自上一次运行时刻起，经该采集任务的采集时间间隔后的时刻不早于系统当前时刻并且距离系统当前时刻最远；将匹配到的最远时间点采集任务分配给采集线程，并将匹配到的最远时间点采集任务的任务状态标记为已分配给采集线程。

根据本发明实施例的再一方面，提供一种数据库采集装置，该装置包括：线程运行状态登记模块，被配置为当采集线程的运行状态为空闲状态时，采集线程向采集调度模块登记空闲状态，采集线程为多个数据库采集线程中的任一个；任务接收模块，被配置为接收采集调度模块分配的待采集任务，待采集任务为采集调度模块通过轮询采集任务队列，从采集任务队列中匹配到一条最远时间点采集任务，最远时间点采集任务为采集任务队列中的如下采集任务：该采集任务自上一次运行时刻起，经该采集任务的采集时间间隔后的时刻不早于系统当前时刻并且该时刻距离系统当前时刻最远；采集任务执行模块，被配置为采集线程将运行状态更新为工作状态并执行待采集任务。

根据本发明实施例的又一方面，提供一种数据库采集装置，该装置包括：空闲采集线程获取模块，被配置为获取登记为空闲状态的采集线程，采集线程为多个数据库采集线程中的任一个；采集任务轮询模块，被配置为轮询采集任务队列，从采集任务队列中匹配一条最远时间点采集任务，最远时间点采集任务为采集任务队列中的如下采集任务：该采集任务自上一次运行时刻起，经该采集任务的采集时间间隔后的时刻不早于系统当前时刻并且距离系统当前时刻最远；采集任务分配模块，被配置为将匹配到的最远时间点采集任务分配给采集线程，并将匹配到的最远时间点采集任务的任务状态标记为已分配给采集线程。