[发明专利]数据处理方法及装置、存储介质及电子设备

权利要求书

1.一种数据处理方法，其特征在于，包括：

响应于数据处理指令，获取所述数据处理指令对应的目标查询语句；

对所述目标查询语句进行解析，获得各个数据表的依赖信息；

当接收到预设的传输队列传输的业务数据时，确定所述业务数据的数据类型；

在所述业务数据的数据类型为新增类型或修改类型的情况下，在各个所述数据表中确定所述业务数据所属的目标数据表；

根据所述业务数据所属的目标数据表和所述依赖信息判断预设的存储区域中是否存在与所述业务数据相匹配的数据；

若所述存储区域中存在与所述业务数据相匹配的数据，则将所述业务数据和所述数据组成宽表数据；

将所述宽表数据存储到预设的宽表中。

2.根据权利要求1所述的方法，其特征在于，还包括：

在所述业务数据的数据类型为删除类型的情况下，获得所述业务数据对应的索引信息；

删除预设宽表中的与所述索引信息相匹配的数据。

3.根据权利要求1所述的方法，其特征在于，还包括：

若所述数据库中不存在与所述业务数据相匹配的数据，则将所述业务数据缓存到所述存储区域中。

4.根据权利要求1所述的方法，其特征在于，所述将所述宽表数据存储到预设的宽表之后，还包括：

当接收到查询指令时，在所述宽表中查询与所述查询指令相匹配的宽表数据，并输出与所述查询指令相匹配的宽表数据。

5.根据权利要求1所述的方法，其特征在于，获取所述数据处理指令对应的目标查询语句，包括：

获取所述数据处理指令中包含的计算模型；

将所述计算模型转换成所述数据处理指令对应的目标查询语句。

6.根据权利要求1所述的方法，其特征在于，所述根据所述业务数据所属的目标数据表和所述依赖信息判断预设的存储区域中是否存在与所述业务数据相匹配的数据，包括：

根据所述依赖信息确定与业务数据所属的目标数据表相关联的数据表；

判断预设的存储区域中是否存在与所述目标数据表相关联的数据表的表数据；所述存储区域包括内存和分布式存储系统hbase数据库中的至少一种；

若所述存储区域中存在与所述目标数据表相关联的数据表的表数据，则确定所述存储区域中存在与所述业务数据相匹配的数据。

7.一种数据处理装置，其特征在于，包括：

获取单元，用于响应数据处理指令，获取所述数据处理指令对应的目标查询语句；

解析单元，用于对所述目标查询语句进行解析，获得各个数据表的依赖信息；

接收单元，用于当接收到预设的传输队列传输的业务数据时，确定所述业务数据的数据类型；

确定单元，用于在所述业务数据的数据类型为新增类型或修改类型的情况下，在各个所述数据表中确定所述业务数据所属的目标数据表；

判断单元，用于根据所述业务数据所属的目标数据表和所述依赖信息判断预设的存储区域中是否存在与所述业务数据相匹配的数据；

执行单元，用于若所述存储区域中存在与所述业务数据相匹配的数据，则将所述业务数据和所述数据组成宽表数据；

存储单元，用于将所述宽表数据存储到预设的宽表中。

8.根据权利要求7所述的装置，其特征在于，获取单元，包括：

获取子单元，用于获取所述数据处理指令中包含的计算模型；

转换子单元，用于将所述计算模型转换成所述数据处理指令对应的目标查询语句。

9.一种存储介质，其特征在于，所述存储介质包括存储指令，其中，在所述指令运行时控制所述存储介质所在的设备执行如权利要求1～6任意一项所述的数据处理方法。

10.一种电子设备，其特征在于，包括存储器，以及一个或者一个以上的指令，其中一个或一个以上指令存储于存储器中，且经配置以由一个或者一个以上处理器执行如权利要求1～6任意一项所述的数据处理方法。