[发明专利]一种多协议数据转换处理方法及装置

说明书

本发明实施例公开了一种多协议数据转换处理方法及装置，方法包括：对需要转换的多协议数据的各个数据库的数据进行配置，生成配置文件；所述配置文件包括源库或源文件、目标库或目标文件、查询语句以及入库语句；对所述配置文件进行解析，并对解析得到的数据进行数据转换；若判断获知数据转换的对比结果记录源表或源文件与最后入库的文件数据一致，则确定数据转换成功。本发明实施例通过对需要转换的多协议数据的各个数据库的数据进行配置生成配置文件，并解析配置文件后进行数据转换，可以实现各个数据库之间的数据快速迁移转换，实现各种文件格式的数据快速入库和出库，为后续的业务处理奠定基础。

技术领域

本发明实施例涉及移动通信技术领域，具体涉及一种多协议数据转换处理方法及装置。

背景技术

在当前移动支撑领域，拆分成了多个系统，但是每个系统之间经常存在大批量的数据迁移转换，如经分系统、酬金结算系统、稽核系统等都需要核心的订购数据以及消费情况等各种数据。

当前数据库之间的迁移转化一般采用以下方式：两个数据库之间建立DBLINK，然后进行数据同步，此方式一般是在临时需要迁移数据的时候进行使用；或采用ORACLE本身自带的备份功能，通过导出DMP文件的方式实现不同ORACLE数据库之间的数据迁移转换；或通过程序时间数据迁移，通过JDBC等方式实现从数据库中获取原始数据放到内存中，再通过连接到目标库实现数据的迁移转换。

当前文件和数据库之间的转化一般采用以下方式：采用ORACLE自带工具SQLLOAD的方式实现文件的入库；或采用程序实现文件的解析和入库，通过程序解析文件后将文件的数据放到内存中，再通过程序通过JDBC等方式连接数据库将数据转移到数据库中。

现有技术存在如下缺点：使用数据库自带的数据转移工具不能实现数据的转换，只能是全量表的数据迁移，不能实现部分字段的转移以及字段的转化；SQLLOAD只能导入txt类型的文件，无法支持多种文件的导入，且需要后台输入对应的命令实现该操作，对使用人员不方便；同时，当前的数据转换迁移单一，只能单独支撑数据库之间的数据迁移或者只能数据库导出文件数据或者导入文件。

发明内容

由于现有方法存在上述问题，本发明实施例提出一种多协议数据转换处理方法及装置。

第一方面，本发明实施例提出一种多协议数据转换处理方法，包括：

对需要转换的多协议数据的各个数据库的数据进行配置，生成配置文件；所述配置文件包括源库或源文件、目标库或目标文件、查询语句以及入库语句；

对所述配置文件进行解析，并对解析得到的数据进行数据转换；

若判断获知数据转换的对比结果记录源表或源文件与最后入库的文件数据一致，则确定数据转换成功。

可选地，所述对需要转换的多协议数据的各个数据库的数据进行配置，生成配置文件，具体包括：

对需要转换的多协议数据的各个数据库的数据源、文件目录和参数替换进行配置，生成配置文件。

可选地，所述对所述配置文件进行解析，并对解析得到的数据进行数据转换，具体包括：

对所述配置文件进行解析，并对解析得到的数据库之间的数据进行数据转换、将文件数据转换为数据库数据，或将数据库数据转换为文件数据。

可选地，包括：

当对数据库之间的数据进行数据转换时，解析配置文件得到源库、目标库的数据源以及查询语句和插入语句；

根据传入的替换参数数据对源库和目标库的数据源进行替换，得到替换后的查询语句和插入语句；

若当前为多通道模式，则根据多通道配置的通道数量以及通道字段，生成每个通道的查询语句和插入语句；