[发明专利]一种数据处理方法、装置、终端设备及存储介质在审
申请号: | 201711399172.0 | 申请日: | 2017-12-22 |
公开(公告)号: | CN108153852A | 公开(公告)日: | 2018-06-12 |
发明(设计)人: | 杨宏伟 | 申请(专利权)人: | 中国平安人寿保险股份有限公司 |
主分类号: | G06F17/30 | 分类号: | G06F17/30 |
代理公司: | 深圳众鼎专利商标代理事务所(普通合伙) 44325 | 代理人: | 谭果林 |
地址: | 518000 广东省深圳市福田*** | 国省代码: | 广东;44 |
权利要求书: | 查看更多 | 说明书: | 查看更多 |
摘要: | 本发明公开了数据采集技术领域,提供了一种数据处理方法、装置、终端设备及存储介质,所述方法包括:获取按照业务需求预先设置的任务依赖关系,其中,任务依赖关系包括导入任务和加工任务之间的第一执行关系,以及加工任务和导出任务之间的第二执行关系;执行导入任务;若导入任务执行成功,则根据第一执行关系,调度并执行加工任务;若加工任务执行成功,则根据第二执行关系,调度并执行导出任务;若导出任务执行成功,则将导出到关系型数据库中的目标数据发送给目标用户。本发明的技术方案实现了在大数据环境下对待处理数据的自动加工以及目标数据的自动导出,减少人工干预,提升了数据下发的时效性。 | ||
搜索关键词: | 导出 任务执行成功 存储介质 目标数据 依赖关系 终端设备 数据处理 加工 关系型数据库 数据采集技术 调度 处理数据 目标用户 人工干预 数据下发 业务需求 预先设置 自动加工 大数据 时效性 | ||
【主权项】:
一种数据处理方法,其特征在于,所述数据处理方法包括:获取按照业务需求预先设置的任务依赖关系,其中,所述任务依赖关系包括导入任务和加工任务之间的第一执行关系,以及所述加工任务和导出任务之间的第二执行关系,所述导入任务用于将关系型数据库中的待处理数据导入到大数据服务器,所述加工任务用于在所述大数据服务器中根据所述业务需求对所述待处理数据进行加工,得到目标数据,所述导出任务用于将所述目标数据导出到关系型数据库;执行所述导入任务;若所述导入任务执行成功,则根据所述第一执行关系,调度并执行所述加工任务;若所述加工任务执行成功,则根据所述第二执行关系,调度并执行所述导出任务;若所述导出任务执行成功,则将导出到所述关系型数据库中的所述目标数据发送给目标用户。
下载完整专利技术内容需要扣除积分,VIP会员可以免费下载。
该专利技术资料仅供研究查看技术是否侵权等信息,商用须获得专利权人授权。该专利全部权利属于中国平安人寿保险股份有限公司,未经中国平安人寿保险股份有限公司许可,擅自商用是侵权行为。如果您想购买此专利、获得商业授权和技术合作,请联系【客服】
本文链接:http://www.vipzhuanli.com/patent/201711399172.0/,转载请声明来源钻瓜专利网。