[发明专利]一种hadoop大数据平台的任务调度管理系统及方法有效
申请号: | 201810856044.2 | 申请日: | 2018-07-31 |
公开(公告)号: | CN110780981B | 公开(公告)日: | 2022-03-25 |
发明(设计)人: | 于洋;李鹏;高经郡;郭振强 | 申请(专利权)人: | 北京科杰科技有限公司 |
主分类号: | G06F9/48 | 分类号: | G06F9/48 |
代理公司: | 北京智行阳光知识产权代理事务所(普通合伙) 11738 | 代理人: | 邓凤姿 |
地址: | 100101 北京市朝阳区阜*** | 国省代码: | 北京;11 |
权利要求书: | 查看更多 | 说明书: | 查看更多 |
摘要: | 本发明公开了一种hadoop大数据平台的任务调度管理系统及方法,系统包括权限模块、任务检索模块、任务依赖模块、调度检索模块、任务合规检查模块、调度模块、报警模块和任务状态检索模块;本发明提供一种可视化系统,用于可视化的进行任务的调度依赖管理,以及任务血缘关系的查看和管理,便于用户进行问题的追溯以任务的依赖关系配置;不再需要用户进行手动配置任务的运行时间,调度的任务会根据前置依赖任务的运行结束时间自动开始运行后置任务;当任务发生运行错误时,会根据用户配置的重试次数进行任务的重试运行,并提供报警机制,提醒依赖了当前运行失败的用户;任务依赖的环自动检索功能,有效避免任务运行死循环的问题。 | ||
搜索关键词: | 一种 hadoop 数据 平台 任务 调度 管理 系统 方法 | ||
【主权项】:
1.一种hadoop大数据平台的任务调度管理系统,包括权限模块(1)、任务检索模块(2)、任务依赖模块(3)、调度检索模块(4)、任务合规检查模块(5)、调度模块(8)、报警模块(9)和任务状态检索模块(10),其特征在于:所述权限模块(1)与任务检索模块(2)通过信号连接,所述任务检索模块(2)与调度检索模块(4)通过信号连接,所述调度检索模块(4)与任务合规检查模块(5)通过信号连接,所述任务合规检查模块(5)与调度模块(8)通过信号连接,所述调度模块(8)分别与任务状态检索模块(10)和任务依赖模块(3)通过信号连接,所述任务状态检索模块(10)与报警模块(9)通过信号连接。/n
下载完整专利技术内容需要扣除积分,VIP会员可以免费下载。
该专利技术资料仅供研究查看技术是否侵权等信息,商用须获得专利权人授权。该专利全部权利属于北京科杰科技有限公司,未经北京科杰科技有限公司许可,擅自商用是侵权行为。如果您想购买此专利、获得商业授权和技术合作,请联系【客服】
本文链接:http://www.vipzhuanli.com/patent/201810856044.2/,转载请声明来源钻瓜专利网。
- 数据显示系统、数据中继设备、数据中继方法、数据系统、接收设备和数据读取方法
- 数据记录方法、数据记录装置、数据记录媒体、数据重播方法和数据重播装置
- 数据发送方法、数据发送系统、数据发送装置以及数据结构
- 数据显示系统、数据中继设备、数据中继方法及数据系统
- 数据嵌入装置、数据嵌入方法、数据提取装置及数据提取方法
- 数据管理装置、数据编辑装置、数据阅览装置、数据管理方法、数据编辑方法以及数据阅览方法
- 数据发送和数据接收设备、数据发送和数据接收方法
- 数据发送装置、数据接收装置、数据收发系统、数据发送方法、数据接收方法和数据收发方法
- 数据发送方法、数据再现方法、数据发送装置及数据再现装置
- 数据发送方法、数据再现方法、数据发送装置及数据再现装置