[发明专利]数据同步生成方法、装置、计算机设备以及存储介质在审
申请号: | 201810955920.7 | 申请日: | 2018-08-21 |
公开(公告)号: | CN109359157A | 公开(公告)日: | 2019-02-19 |
发明(设计)人: | 席旭亮 | 申请(专利权)人: | 中国平安人寿保险股份有限公司 |
主分类号: | G06F16/27 | 分类号: | G06F16/27;G06F16/28;G06F16/22 |
代理公司: | 深圳市明日今典知识产权代理事务所(普通合伙) 44343 | 代理人: | 王杰辉 |
地址: | 518000 广东省深圳市福田区益田路503*** | 国省代码: | 广东;44 |
权利要求书: | 查看更多 | 说明书: | 查看更多 |
摘要: | 本申请涉及数据资源,揭示了数据同步生成方法、装置、计算机设备以及存储介质,其中,数据同步生成方法,包括:在关系数据库中读取预配置的将关系数据库数据同步到大数据平台的配置表格的表结构,以获取所述配置表格的各配置信息;根据所述配置信息生成所述大数据平台对应的调度任务、脚本和建表语句;将所述调度任务、脚本和建表语句分别传输至所述大数据平台的指定位置,以调度关系数据库的指定数据到大数据平台。开发了Sqoop数据同步自动生成工具,能自动生成Sqoop数据同步的脚本文件和建表语句,直接进行部署(挂在另外一个平台上面),通过平台进行控制脚本文件的同步,脚本运行平台统一、集中,方便运营人员统管所有脚本运行情况。 | ||
搜索关键词: | 数据同步 大数据 语句 计算机设备 存储介质 脚本运行 配置信息 自动生成 脚本 关系数据库数据 读取 调度 关系数据库 调度关系 脚本文件 控制脚本 数据资源 表结构 预配置 配置 数据库 传输 运营 申请 部署 开发 统一 | ||
【主权项】:
1.一种数据同步生成方法,其特征在于,将关系数据库数据同步到大数据平台,方法包括:在关系数据库中读取预配置的将关系数据库数据同步到大数据平台的配置表格的表结构,以获取所述配置表格的各配置信息;根据所述配置信息生成所述大数据平台对应的调度任务、脚本和建表语句;将所述调度任务、脚本和建表语句分别传输至所述大数据平台的指定位置,以调度关系数据库的指定数据到大数据平台。
下载完整专利技术内容需要扣除积分,VIP会员可以免费下载。
该专利技术资料仅供研究查看技术是否侵权等信息,商用须获得专利权人授权。该专利全部权利属于中国平安人寿保险股份有限公司,未经中国平安人寿保险股份有限公司许可,擅自商用是侵权行为。如果您想购买此专利、获得商业授权和技术合作,请联系【客服】
本文链接:http://www.vipzhuanli.com/patent/201810955920.7/,转载请声明来源钻瓜专利网。
- 上一篇:数据存储结构处理方法和装置
- 下一篇:数据同步方法、装置及存储介质