[发明专利]基于工作流机制的并发式ETL转换方法无效
申请号: | 201210181714.8 | 申请日: | 2012-06-04 |
公开(公告)号: | CN102722355A | 公开(公告)日: | 2012-10-10 |
发明(设计)人: | 王渊 | 申请(专利权)人: | 南京中兴软创科技股份有限公司 |
主分类号: | G06F9/38 | 分类号: | G06F9/38;G06F9/46 |
代理公司: | 南京天华专利代理有限责任公司 32218 | 代理人: | 夏平 |
地址: | 211153 江苏*** | 国省代码: | 江苏;32 |
权利要求书: | 查看更多 | 说明书: | 查看更多 |
摘要: | 一种基于工作流机制的并发式ETL转换方法,利用工作流技术和多线程并发技术,实现了ETL工作流的多个ETL任务并发执行和单个任务内的多个ETL活动的并发执行。当同时执行多个ETL工作流,且ETL工作流和ETL作业中并行分支较多时,可以明显的提高执行效率。与此同时,本方法提出通过一种通过构建集群分布处理,并行管道技术构建并行ETl数据抽取引擎,能够大大提高数据本身的抽取效率,解决了多数据流的并行处理问题和转换处理的瓶颈问题。 | ||
搜索关键词: | 基于 工作流 机制 发式 etl 转换 方法 | ||
【主权项】:
一种基于工作流机制的并发式ETL转换方法,其特征在于,该方法包括以下实现步骤:A、建立基于WFMC模型的面向数据任务的工作流进程,将多个工作流实例通过网络分布在不同的计算节点上;B、建立多个并行的数据抽取转换执行进程即ETL进程,用于执行各工作流任务;C、建立对上述并行进程即并行的工作流任务的主控管理进程,用于负责对并行抽取任务进行监控和管理; D、建立并行的任务管理调度进程,用于将工作流任务调取至主控管理进程。
下载完整专利技术内容需要扣除积分,VIP会员可以免费下载。
该专利技术资料仅供研究查看技术是否侵权等信息,商用须获得专利权人授权。该专利全部权利属于南京中兴软创科技股份有限公司,未经南京中兴软创科技股份有限公司许可,擅自商用是侵权行为。如果您想购买此专利、获得商业授权和技术合作,请联系【客服】
本文链接:http://www.vipzhuanli.com/patent/201210181714.8/,转载请声明来源钻瓜专利网。
- 上一篇:腹肌康复器材
- 下一篇:新型的保持架组件锁紧结构