[发明专利]基于数据包的远程数据增量同步方法

权利要求书

1.一种基于数据包的远程数据增量同步方法，其特征在于，包括以下步骤：

获取源数据库的DML；

将所述DML导出为数据包；

将所述数据包远程同步到目标数据库；

将所述数据包解析成SQL语句和变更数据；

将所述SQL语句和变更数据更新到目标数据库。

2.如权利要求1所述的远程数据增量同步方法，其特征在于，所述将DML导出为数据包的步骤具体包括：

导出数据包文件，包括XML文件和CSV文件，其中XML文件记录所有DML中的SQL语句，CSV记录所有增加和修改的变更数据。

3.如权利要求1所述的远程数据增量同步方法，其特征在于，所述将数据包远程同步到目标数据库的步骤包括：

根据网络状况和同步紧急度需求，选择采用JMS或者FTP的方式进行远程同步。

4.如权利要求3所述的远程数据增量同步方法，其特征在于，所述将数据包远程同步到目标数据库的步骤具体包括：

对于FTP方式，建立数据包目录，部署FTP客户端程序和FTP服务器端程序，发送端按照一定的时间周期，执行数据扫描，若发现数据包目录中存在新的数据包文件，先将文件信息记载到发送端本地配置数据库中，然后通过FTP协议，访问远程FTP服务器端，将数据包文件上传，并等待接收端回复信息，接收端收到所述数据包文件后，将数据包文件保存并将所述文件信息记载到接收端本地配置数据库中，然后通过FTP命令的方式向接收端反馈回执；

对于JMS方式，建立数据包目录，部署发送端程序和接收端程序，发送端按照一定的时间周期，执行数据扫描，若发现数据包目录中存在新的数据包文件，先将文件信息记载到发送端本地配置数据库中，然后通过JMS协议，利用消息中间件将数据包文件作为消息附件进行投递，并等待接收端回复信息，接收端收到信息后，将文件保存并将文件信息记载到本地配置数据库中，然后向接收端 反馈回执。

5.如权利要求1所述的远程数据增量同步方法，其特征在于，所述将SQL语句和变更数据入库到目标数据库的步骤包括：

目标数据库接收到数据包后，对于XML格式，解析SQL语句，并按照预定规则转化为自身的数据库格式后入库；对于CSV格式，则按照目标数据库相应的数据字典信息构造入库操作语句执行入库操作。

6.一种基于数据包的远程数据增量同步装置，其特征在于，包括：

获取模块，用于获取源数据库的DML；

数据包生成模块，用于将所述DML导出为数据包；

同步模块，用于将所述数据包远程同步到目标数据库；

解析模块，用于将所述数据包解析成SQL语句和变更数据；

入库模块，用于将所述SQL语句和变更数据更新到目标数据库。

7.如权利要求6所述的远程数据增量同步装置，其特征在于，所述数据包生成模块具体用于：

导出数据包文件，包括XML文件和CSV文件，其中XML文件记录所有DML中的SQL语句，CSV记录所有增加和修改的变更数据。

8.如权利要求6所述的远程数据增量同步装置，其特征在于，所述同步模块具体用于：

根据网络状况和同步紧急度需求，选择采用JMS或者FTP的方式进行远程同步。

9.如权利要求8所述的远程数据增量同步装置，其特征在于，所述同步模块还用于：

对于FTP方式，建立数据包目录，部署FTP客户端程序和FTP服务器端程序，发送端按照一定的时间周期，执行数据扫描，若发现数据包目录中存在新的数据包文件，先将文件信息记载到发送端本地配置数据库中，然后通过FTP协议，访问远程FTP服务器端，将数据包文件上传，并等待接收端回复信息，接收端收到所述数据包文件后，将数据包文件保存并将所述文件信息记载到接收端本地配置数据库中，然后通过FTP命令的方式向接收端反馈回执；

对于JMS方式，建立数据包目录，部署发送端程序和接收端程序，发送端按照一定的时间周期，执行数据扫描，若发现数据包目录中存在新的数据包文件，先将文件信息记载到发送端本地配置数据库中，然后通过JMS协议，利用消息中间件将数据包文件作为消息附件进行投递，并等待接收端回复信息，接收端收到信息后，将文件保存并将文件信息记载到本地配置数据库中，然后向接收端    反馈回执。

10.如权利要求6所述的远程数据增量同步装置，其特征在于，所述入库模块具体用于：

目标数据库接收到数据包后，对于XML格式，解析SQL语句，并按照预定规则转化为自身的数据库格式后入库；对于CSV格式，则按照目标数据库相应的数据字典信息构造入库操作语句执行入库操作。