[发明专利]一种数据源动态调度方法、装置、电子设备及存储介质

说明书

本申请提供了一种数据源动态调度方法、装置、电子设备及存储介质，所述方法包括：在第一数据源响应携带有目标业务的访问请求且访问请求处于等待的过程中，获取目标业务对应的多个数据源的负载信息；其中，多个数据源中具有相同的业务数据；第一数据源是基于多个数据源的负载信息确定的；根据多个数据源对应的负载信息，计算多个数据源分别对应的目标分值；其中，目标分值用于表征数据源对应的负载量大小；如果根据目标分值确定的候选数据源为与第一数据源不同的第二数据源，则将第一数据源下的访问请求转发给第二数据源。本申请保证了各个数据源长期处于基本同一负载水平，提高了数据源的资源利用率，且提高了访问请求的处理效率。

技术领域

本申请涉及数据处理领域，具体而言，涉及一种数据源动态调度方法、装置、电子设备及存储介质。

背景技术

随着互联网的普遍应用，各行业的业务数据通常存储在多个数据源中，相应的，各行业在运行业务时，就需要对多个数据源中的相关业务数据进行频繁的访问与处理。

目前，传统对多个数据源进行调度的方法如下：在响应访问请求时，基于当前已有的数据源对应的负载情况，为该访问请求分配执行数据源，以通过该执行数据源响应该访问请求。

但是，上述调度方法中，是通过一次数据源调度为该访问请求进行分配执行数据源，当该访问请求在分配的该执行数据源下处于排队情况时，可能会有其他数据源完成任务而处于空闲状态的情况，因此，上述调度方法使得数据源的资源利用率低，进而降低了访问请求的处理效率。

发明内容

有鉴于此，本申请的目的在于提供一种数据源动态调度方法、装置、电子设备及存储介质，能够实时根据当前各个数据源业务请求情况判断数据源负载情况并多次对业务请求进行调度，使各个数据源负载基本处于同一水平，无需中断当前业务或是重启设备便可以完成对数据源的增加或移除，稳定性高，提高了资源利用率，大幅提升了业务完成效率。

第一方面，本申请实施例提供了一种数据源动态调度方法，所述方法包括：

在第一数据源响应携带有目标业务的访问请求且所述访问请求处于等待的过程中，获取所述目标业务对应的多个数据源的负载信息；其中，所述多个数据源中具有相同的业务数据；所述第一数据源是基于所述多个数据源的负载信息确定的；

根据所述多个数据源对应的负载信息，计算所述多个数据源分别对应的目标分值；其中，所述目标分值用于表征所述数据源对应的负载量大小；

如果根据所述目标分值确定的候选数据源为与所述第一数据源不同的第二数据源，则将所述第一数据源下的所述访问请求转发给所述第二数据源。

在一种可能的实施方式中，所述方法还包括：

在第一数据源响应携带有目标业务的访问请求且所述访问请求处于等待的过程中，若监测到所述目标业务对应的新数据源上线，则将预设分值确定所述新数据源对应的目标分值；其中，所述预设分值为所述目标分值对应计算范围的最低值。

在一种可能的实施方式中，所述方法还包括：

响应针对数据源的选择指令，确定所述选择指令选择的目标数据源，并停止获取所述目标数据源对应的负载信息；

响应针对所述目标数据源的删除指令，当所述目标数据源满足预设的删除条件时，删除所述目标数据源。

所述负载信息包括负载指标和所述负载指标对应的权重值；所述根据所述多个数据源对应的负载信息，计算所述多个数据源分别对应的目标分值，包括：

根据所述多个数据源分别对应的负载指标和每个负载指标对应的权重值，计算每个数据源对应的目标分值；其中，所述负载指标包括以下至少之一：单位时间内目标业务总执行时间、单位时间内目标业务总执行条数，每个数据源正在执行以及挂载的目标业务的总条数。

在一种可能的实施方式中，所述方法还包括：