[发明专利]一种数据自动化同步的配置方法

摘要

本发明涉及数据自动化处理技术领域，是一种数据自动化同步的配置方法，具体为一种后台shell脚本文件和kettle结合实现海量数据实现自动化比对处理的配置方法。将源数据库和目标数据库通过kettle建立有效连接，并将源数据库数据以及表结构通过执行已经编译好的bat、vbs文件脚本以最快的速度、最小的时间同步到目标数据库，实现源数据库和目标数据库数据以及结构的共享；通过kettle本身可以执行sql语言以及shell脚本的特性，将数据处理脚本编译进shell脚本以及sql执行语句脚本中进行数据处理；通过kettle定时作业执行的特性编辑数据同步及处理定时任务，定时调用shell脚本发明处理数据进入目标业务库，将数据处理为业务需要的数据结构及表名称；通过定时执行各类脚本极大程度的缩减了人工参与成本、将数据比对处理工作实现自动化同步、自动化比对处理。