[发明专利]一种数据字典动态更新方法及装置

说明书

技术领域

本申请涉及数据更新技术领域，特别是涉及一种数据字典动态更新方法及装置。

背景技术

随着科技的发展，实时数据计算技术应用越来越广泛，实时数据计算不仅是数据分析的基础，而且还可为公司的运营决策提供实时有效的数据支持。

在实时计算数据的过程中，某些场景下会需要关联数据字典，以从数据字典中查询数据。一般情况下是在实时数据计算程序启动后，将数据字典初始化到内存中，进而基于初始化到内存中的数据字典进行实时数据计算。

但是，在数据字典需要更新时，因需要重新启动实时数据计算程序，将更新后的数据字典初始化到内存，以达到更新数据字典的目的，因此，通常会导致在实时数据计算程序重新启动的这段时间数据丢失的问题。

发明内容

有鉴于此，本申请实施例提供一种数据字典动态更新方法及装置，以在避免数据丢失的基础上，实现数据字典的动态更新。

为了实现上述目的，本申请实施例提供的技术方案如下：

一种数据字典动态更新方法，应用于实时数据计算程序，该方法包括：

在所述实时数据计算程序运行过程中，确定是否满足预设的数据字典更新条件，所述数据字典更新条件包括当前系统时间到达预设的数据字典更新时机，或者，从与所述实时数据计算程序关联的内存中的数据字典中未查找到当前作为查询条件的数据的数据查询结果；

若确定满足所述数据字典更新条件，暂停运行所述实时数据计算程序，并在将所述内存中的数据字典更新为当前本地数据库中的数据字典后，启动继续运行所述实时数据计算程序。

优选的，在所述数据字典更新条件包括当前系统时间到达预设的数据字典更新时机时，

所述启动继续运行所述实时数据计算程序，包括：

启动继续运行所述实时数据计算程序，确定当前待处理的数据，所述数据包括在暂停运行所述实时数据计算程序时待被所述实时数据计算程序处理的数据，或者，若在暂停运行所述实时数据计算程序时不存在待被所述实时数据计算程序处理的数据，在将所述内存中的数据字典更新为当前本地数据库中的数据字典后，从数据源获取的下一待被所述实时数据计算程序处理的数据；

将所确定的数据作为当前的查询条件，在所述内存中的更新后的数据字典中查找所述查询条件的数据查询结果。

优选的，若在所述内存中的更新后的数据字典中未查找到所述查询条件的数据查询结果，将所述查询条件的数据查询结果设置为空值，

在所述内存中的更新后的数据字典中查找所述查询条件的数据查询结果之后，该方法还包括：

若所述查询条件的数据查询结果为空值，将关联有所述查询条件的所述数据查询结果存储至第一数据库；

若所述查询条件的数据查询结果不为空值，将关联有所述查询条件的所述数据查询结果存储至第二数据库。

优选的，所述数据字典更新条件包括从与所述实时数据计算程序关联的内存中的数据字典中未查找到当前作为查询条件的数据的数据查询结果时，

所述确定是否满足预设的数据字典更新条件，包括：

在从与所述实时数据计算程序关联的内存中的数据字典中未查找到当前作为查询条件的数据的数据查询结果的情况下，确定所述当前作为查询条件的数据连续被查询的次数是否达到预设阈值；

若否，确定满足预设的数据字典更新条件；

若是，确定不满足预设的数据字典更新条件。

优选的，若从与所述实时数据计算程序关联的内存中的数据字典中未查找到当前作为查询条件的数据的数据查询结果，将所述当前作为查询条件的数据的数据查询结果设置为空值，

在所述确定不满足预设的数据字典更新条件之后，该方法还包括：

将关联有所述当前作为查询条件的数据的所述数据查询结果存储至第三数据库。

优选的，所述启动继续运行所述实时数据计算程序，包括：

启动继续运行所述实时数据计算程序，在所述内存中的更新后的数据字典中，再次查找所述当前作为查询条件的数据的数据查询结果。

一种数据字典动态更新装置，应用于实时数据计算程序，该装置包括：

条件确定单元，用于在所述实时数据计算程序运行过程中，确定是否满足预设的数据字典更新条件，所述数据字典更新条件包括当前系统时间到达预设的数据字典更新时机，或者，从与所述实时数据计算程序关联的内存中的数据字典中未查找到当前作为查询条件的数据的数据查询结果；