[发明专利]一种应用于MYSQL BINLog变更数据的实时采集方法在审
申请号: | 202111576355.1 | 申请日: | 2021-12-22 |
公开(公告)号: | CN113961570A | 公开(公告)日: | 2022-01-21 |
发明(设计)人: | 周维;杨斌 | 申请(专利权)人: | 四川新网银行股份有限公司 |
主分类号: | G06F16/22 | 分类号: | G06F16/22;G06F16/28;G06F40/18;G06F40/186 |
代理公司: | 成都智言知识产权代理有限公司 51282 | 代理人: | 李勇 |
地址: | 610094 四川省成都市成都*** | 国省代码: | 四川;51 |
权利要求书: | 查看更多 | 说明书: | 查看更多 |
摘要: | 本发明公开了一种应用于MYSQL BINLog变更数据的实时采集方法,属于大数据技术领域。本发明包括:1、在Excel中配置需采集的MYSQL数据库的数据库连接信息和采集字段信息,并配置用于解析Excel模板位置、Flink SQL脚本输出文件配置信息以及执行环境配置信息的配置文件;2、执行Flink_mysql脚本工具,自动生成Flink CDC采集脚本;3、将Flink CDC采集脚本上传到各Flink客户端节点执行任务发布。本发明通过简单的配置和工具自动生成采集代码,实现复杂且频繁的实时采集研发任务,将采集任务集成于现有的实时应用平台,充分利用集群资源,实现统一运维管理,降低维护成本。 | ||
搜索关键词: | 一种 应用于 mysql binlog 变更 数据 实时 采集 方法 | ||
【主权项】:
暂无信息
下载完整专利技术内容需要扣除积分,VIP会员可以免费下载。
该专利技术资料仅供研究查看技术是否侵权等信息,商用须获得专利权人授权。该专利全部权利属于四川新网银行股份有限公司,未经四川新网银行股份有限公司许可,擅自商用是侵权行为。如果您想购买此专利、获得商业授权和技术合作,请联系【客服】
本文链接:http://www.vipzhuanli.com/patent/202111576355.1/,转载请声明来源钻瓜专利网。