[发明专利]数据处理方法、装置、设备以及存储介质

说明书

本公开的实施例提供了数据处理方法、装置、设备以及存储介质。方法包括获取目标数据，其中目标数据包括更新后的程序代码和更新后的配置文件；基于目标数据生成停止信号并发送给目标事件进程组；在检测到目标事件进程组基于停止信号完成当前事件处理的情况下，根据更新后的配置文件关闭目标事件进程组；重启与目标事件进程组对应的事件进程组；基于重启的事件进程组执行更新后的程序代码。以此方式，可以实现在不影响当前事件处理的情况下，不停机进行系统升级，解决系统升级、日常维护所导致的停机时间，提高系统和应用的可用性。

技术领域

本公开涉及数据处理领域，尤其涉及基于Docker容器的数据处理领域。

背景技术

目前数据处理系统的技术方案是多线程数据处理或者是固定式多进程数据处理。

但是多线程的稳定性不足，在子线程发生崩溃时会导致主线程直接崩溃，且在CPU密集性的数据处理任务中优势不足，无法满足高可用，高性能的业务需求。

固定式多进程数据处理，会导致子进程数固定，无法最大效率利用多核CPU性能，无法平滑无缝新建子进程和关闭子进程，无法满足高可用，高性能的业务需求。

因此，现有的多线程数据处理或者固定式多进程数据处理，存在无法满足高可用，高性能的业务需求。

发明内容

本公开提供了一种数据处理方法、装置、设备以及存储介质。

根据本公开的第一方面，提供了一种数据处理方法。该方法包括：

获取目标数据，其中目标数据包括更新后的程序代码和更新后的配置文件；

基于目标数据生成停止信号并发送给目标事件进程组；

在检测到目标事件进程组基于停止信号完成当前事件处理的情况下，根据更新后的配置文件关闭目标事件进程组；

重启与目标事件进程组对应的事件进程组；

基于重启的事件进程组执行更新后的程序代码。

在第一方面的一些实现方式中，更新后的配置文件包括事件进程组关闭信息；在检测到目标事件进程组基于停止信号完成当前事件处理的情况下，根据更新后的配置文件关闭目标事件进程组，包括：

目标事件进程组基于停止信号，停止从数据存储区获取数据；

当前事件组在完成当前事件处理的情况下，生成当前事件完成反馈信息并发送给主进程；

主进程根据当前事件完成反馈信息和事件进程组关闭信息，关闭目标事件进程组。

在第一方面的一些实现方式中，在重启与目标事件进程组对应的事件进程组之前，该方法还包括：加载更新后的程序代码。

在第一方面的一些实现方式中，更新后的配置文件还包括子进程数量信息；该方法还包括：

获取目标事件进程组中的子进程数量；

加载更新后的配置文件中包括的子进程数量信息；

根据配置文件中包括的子进程数量信息和目标事件进程组中的子进程数量，调整目标事件进程组中的子进程数。

在第一方面的一些实现方式中，根据配置文件中包括的子进程数量信息和目标事件进程组中的子进程数量，调整目标事件进程组中的子进程数，包括：

当目标事件进程组中的子进程数量小于配置文件中包括的子进程数量信息记载的数量时，在目标事件进程组中增加新的子进程。

在第一方面的一些实现方式中，根据配置文件中包括的子进程数量信息和目标事件进程组中的子进程数量，调整目标事件进程组中的子进程数，包括：