[发明专利]集群状态监管方法及装置在审
申请号: | 202110853899.1 | 申请日: | 2021-07-28 |
公开(公告)号: | CN113590420A | 公开(公告)日: | 2021-11-02 |
发明(设计)人: | 兰洋 | 申请(专利权)人: | 杭州玳数科技有限公司 |
主分类号: | G06F11/30 | 分类号: | G06F11/30 |
代理公司: | 常州佰业腾飞专利代理事务所(普通合伙) 32231 | 代理人: | 王巍巍 |
地址: | 311121 浙江省杭州市余杭区仓前街道余杭*** | 国省代码: | 浙江;33 |
权利要求书: | 查看更多 | 说明书: | 查看更多 |
摘要: | |||
搜索关键词: | 集群 状态 监管 方法 装置 | ||
1.一种集群状态监管方法,其特征在于,应用于flink on yarn集群模式,所述集群状态监管方法包括:
通过yarn客户端获取当前资源管理平台上Flink Session的Appid;
若没有获取到Flink Session的Appid,进入启动Flink Session的步骤,判断当前engine节点是否为leader节点;
若是,进一步判断当前engine节点是否处于engine自动托管状态;
若是,部署Flink Session;
Flink Session部署成功后启动状态监测器,对Flink Session的健康状态进行轮询。
2.如权利要求1所述的集群状态监管方法,其特征在于,所述集群状态监管方法中还包括对Flink Session的健康状态进行标记的步骤,包括:
所述通过yarn客户端获取当前资源管理平台上Flink Session的Appid中,若获取到Flink Session的Appid,将该Flink Session的健康状态标记为HEALTHY;
或,所述判断当前engine节点是否为leader节点中,若判断当前engine节点不为leader节点,将该Flink Session的健康状态标记为UNHEALTHY;
或,所述判断当前engine节点是否处于engine自动托管状态中,若判断当前engine节点不处于engine自动托管状态,将该Flink Session的健康状态标记为UNHEALTHY;
或,所述部署Flink Session中,若Flink Session部署不成功,将该Flink Session的健康状态标记为UNHEALTHY。
3.如权利要求1或2所述的集群状态监管方法,其特征在于,所述Flink Session部署成功后启动状态监测器,对Flink Session的健康状态进行轮询中,包括:
判断Flink Session的健康状态是否被标记为HEALTHY;
若是,判断Flink Session的运行状态是否为running;
若是,提交状态校验任务至Flink Session;
若所述状态校验任务成功提交至Flink Session且运行正常,基于当前运行状态对Flink Session的运行状态lastAppState进行更新;
若所述状态校验任务提交失败,判断状态校验任务提交的次数是否大于预设提交次数阈值;
若是,重置Flink Session的健康状态,将其标记为UNHEALTHY,并更新Flink Session的运行状态lastAppState;否则在预设时间后再一次提交状态校验任务至Flink Session,并以此循环。
4.如权利要求3所述的集群状态监管方法,其特征在于,所述判断Flink Session的健康状态是否被标记为HEALTHY中,若判断Flink Session的健康状态被标记为UNHEALTHY,则
判断Flink Session的重启次数是否大于预设重启次数阈值;
若没有,重启Flink Session,进入通过yarn客户端获取当前资源管理平台上FlinkSession的Appid的步骤,否则停止运行健康状态轮询操作。
5.如权利要求3所述的集群状态监管方法,其特征在于,所述判断Flink Session的运行状态是否为running中,若判断Flink Session的运行状态不是running,则
判断Flink Session的运行状态是否为除running运行状态之外的其他预设运行状态;
若是,重置Flink Session的健康状态,将其标记为UNHEALTHY,并更新Flink Session的运行状态lastAppState;
若不是,判断当前运行状态是否与最新一次更新的运行状态lastAppState一致;
若一致,输出告警日志,记录Flink Session启动超时;否则输出INFO日志对FlinkSession的当前状态进行记录。
该专利技术资料仅供研究查看技术是否侵权等信息,商用须获得专利权人授权。该专利全部权利属于杭州玳数科技有限公司,未经杭州玳数科技有限公司许可,擅自商用是侵权行为。如果您想购买此专利、获得商业授权和技术合作,请联系【客服】
本文链接:http://www.vipzhuanli.com/pat/books/202110853899.1/1.html,转载请声明来源钻瓜专利网。
- 上一篇:内循环养殖系统
- 下一篇:一种桩头破除设备及方法