[发明专利]一种数据转换的方法、装置及存储介质

权利要求书

1.一种数据转换的方法，其特征在于，该方法包括：

响应数据转换指令，将所述数据转换指令对应的目标表信息、所述数据转换指令对应的原始表，以及所述数据转换指令对应的转换模式的预设基础脚本进行组合，生成目标脚本；

调用NiFi工具的应用程序接口API接口创建任务流，并在所述任务流中设置所述目标脚本，以在运行所述任务流时，通过预先开发的处理节点执行所述目标脚本，进行数据转换。

2.如权利要求1所述的方法，其特征在于，所述将所述数据转化指令对应的目标表信息、所述数据转换指令对应的原始表，以及所述数据转换指令对应的转换模式的预设基础脚本进行组合，生成目标脚本，包括：

将所述目标表中的各个字段名，以及所述各个字段名对应的转换函数，按照字段名与转换函数之间的对应关系，填写到所述转换模式的预设基础脚本的第一设定位置上；以及

将所述原始表的数据填写到所述转换模式的预设基础脚本的第二设定位置上。

3.如权利要求1或2所述的方法，其特征在于，所述目标表信息是通过如下方式确定的：

响应配置字段变换指令，根据所述配置字段变换指令对应的字段名及每个字段名对应的转换函数，确定所述目标表信息；

其中，所述字段名是在对原始表配置表组合后，确定的备选字段名中选择的。

4.如权利要求1所述的方法，其特征在于，所述调用NiFi工具的API接口创建任务流，并在所述任务流中设置所述目标脚本，包括：

调用所述NiFi工具的API接口创建任务流，并在所述任务流创建成功后，调用所述NiFi工具的API接口，在所述任务流中设置所述目标脚本。

5.如权利要求1所述的方法，其特征在于，所述调用NiFi工具的API接口创建任务流，并在所述任务流中设置所述目标脚本后，还包括：

响应目标脚本设置成功指令，并发送运行任务流的指令，以在运行所述任务流时，通过预先开发的处理节点执行所述目标脚本，根据所述目标表中的字段名在所述原始表的数据中确定需要进行数据转换的数据，并对所述需要进行数据转换的数据进行数据转换。

6.一种数据转换的方法，其特征在于，该方法包括：

响应创建任务流的指令，基于预先创建的转换模板创建任务流，并在所述任务流中设置目标脚本，其中，所述目标脚本是数据治理平台在响应数据转换指令后，根据所述数据转换指令对应的目标表信息、所述数据转换指令对应的原始表，以及所述数据转换指令对应的转换模式的预设基础脚本进行组合生成的；

响应运行任务流的指令，执行所述目标脚本，读取所述目标脚本中原始表的数据，确定需要进行数据转换的数据；

将所述需要进行数据转换的数据转换成目标数据，并写入所述目标脚本对应的目标表中。

7.如权利要求6所述的方法，其特征在于，所述响应运行任务流的指令，执行所述目标脚本，读取所述目标脚本中原始表的数据，确定需要进行数据转换的数据，包括：

通过预先开发的处理节点执行所述目标脚本，读取所述目标脚本中原始表的数据，根据所述目标脚本中目标表的字段名，在所述原始表的数据中确定需要进行数据转换的数据。

8.如权利要求7所述的方法，其特征在于，所述根据所述目标脚本中目标表的字段名，在所述原始表的数据中确定需要进行数据转换的数据，还包括：

根据所述目标脚本中目标表的字段名，以及所述目标脚本中预设基础脚本的运算逻辑，在所述原始表的数据中确定需要进行数据转换的数据。