[发明专利]数据集成方法、系统、计算机设备和存储介质

说明书

本申请涉及一种数据集成方法、系统、计算机设备和存储介质。方法包括：接收由共享管理控制台发送的数据集成请求，并将数据集成请求缓存至数据请求池；数据集成请求包括数据提供方标识和集成端地址；对于多个容器集群中的每个容器集群，均根据集成端地址和当前容器集群的集群地址，从数据请求池中筛选出至少一个候选数据集成请求；根据当前容器集群的空闲资源量和执行候选数据集成请求所需的执行资源量，确定候选数据集成请求中的目标数据集成请求；通过当前容器集群，响应于目标数据集成请求，将与数据提供方标识相对应的数据提供方所提供的数据进行集成。采用本方法能够提升数据集成的可拓展性。

技术领域

本申请涉及计算机技术领域，特别是涉及一种数据集成方法、系统、计算机设备和存储介质。

背景技术

随着计算机技术的发展，企业经常需要通过计算机开展数据集成业务。数据集成是把不同来源、格式、结构的数据在逻辑上或物理上有机地集中，从而为企业提供全面的数据共享。

目前，企业在开展数据集成业务时，需要构造与自身相关联的集成执行器和管理控制台，并单点部署架构，将构造的集成执行器和管理控制台集成于一个服务中，从而通过部署于同一服务中的管理控制台来生成数据集成请求、以及通过集成执行器来执行数据集成请求。

然而，由于集成执行器和管理控制台集成于一个服务中，因此使得集成执行器和管理控制台处于紧耦合的状态，从而降低了数据集成系统的可拓展性。

发明内容

基于此，有必要针对上述技术问题，提供一种能够提高数据集成可拓展性的数据集成方法、系统、装置、计算机设备、存储介质和计算机程序产品。

第一方面，本申请提供了一种数据集成方法。所述方法包括：

接收由共享管理控制台发送的数据集成请求，并将所述数据集成请求缓存至数据请求池；所述数据集成请求包括数据提供方标识和集成端地址；

对于多个容器集群中的每个容器集群，均根据所述集成端地址和当前容器集群的集群地址，从所述数据请求池中筛选出至少一个候选数据集成请求；

根据所述当前容器集群的空闲资源量和执行所述候选数据集成请求所需的执行资源量，确定所述候选数据集成请求中的目标数据集成请求；

通过所述当前容器集群，响应于所述目标数据集成请求，将与所述数据提供方标识相对应的数据提供方所提供的数据进行集成。

在其中一个实施例中，接收由共享管理控制台发送的数据集成请求，并将所述数据集成请求缓存至数据请求池之前，所述方法还包括：确定所述数据请求池所关联的共享管理控制台；其中，所述共享管理控制台包括主控制台和至少一个从控制台；确定所述主控制台是否处于正常运行状态；若是，则将所述数据请求池与所述主控制台进行连接；若否，则确定每个所述从控制台各自对应的运行状态，将所述数据请求池与处于正常运行状态的从控制台进行连接。

在其中一个实施例中，根据所述当前容器集群的空闲资源量和执行所述候选数据集成请求所需的执行资源量，确定所述候选数据集成请求中的目标数据集成请求，包括：确定执行每个候选数据集成请求各自所需的执行资源量；将所述当前容器集群的空闲资源量与所述执行资源量进行对比，并将小于或等于所述空闲资源量的执行资源量作为目标执行资源量；根据所述目标执行资源量，从所述候选数据集成请求中筛选出目标数据集成请求。

在其中一个实施例中，响应于所述目标数据集成请求，将与所述数据提供方标识相对应的数据提供方所提供的数据进行集成之后，还包括：释放执行所述目标数据集成请求时占用的执行资源；根据释放的执行资源，对所述当前容器集群的空闲资源量进行更新。