[发明专利]基于Flink引擎计算节点动态扩展的任务评价方法和装置在审
| 申请号： | 202210306938.0 | 申请日： | 2022-03-25 |
| 公开（公告）号： | CN114817241A | 公开（公告）日： | 2022-07-29 |
| 发明（设计）人： | 宋美娜;罗显宴;鄂海红;张光卫;欧中洪;国晓雪;于勰;董亚飞;李国英;郭京荆 | 申请（专利权）人： | 北京邮电大学 |
| 主分类号： | G06F16/22 | 分类号： | G06F16/22;G06F16/2458;G06F16/953;G06Q40/02 |
| 代理公司： | 北京清亦华知识产权代理事务所(普通合伙) 11201 | 代理人： | 单冠飞 |
| 地址： | 100876 北京市海淀区西*** | 国省代码： | 北京;11 |
| 权利要求书： | 查看更多 | 说明书： | 查看更多 |
| 摘要： | 本申请提出了一种基于Flink引擎计算节点动态扩展的任务评价方法，包括：接收客户端发送的任务；接收客户端在出现数据热点时发送的节点扩展指令，根据节点扩展指令修改任务的执行图的拓扑结构，并通知目标算子任务的上游算子任务增加结果分区和变更虚拟哈希映射表和虚拟路由表，其中，目标算子任务为出现数据热点的算子任务；通过任务管理器启动新增计算节点，初始化新增计算节点的输入网关和结果分区；通知目标算子任务的下游算子任务增加输入通道；通过任务管理器根据修改后的任务的执行图的拓扑结构，对用户数据进行处理，得到任务评价结果。本申请解决了Flink引擎处理数据时的数据倾斜的问题，提高了系统的数据计算速度，满足任务实时场景需求。 | ||
| 搜索关键词： | 基于 flink 引擎 计算 节点 动态 扩展 任务 评价 方法 装置 | ||
【主权项】：
暂无信息
下载完整专利技术内容需要扣除积分，VIP会员可以免费下载。
该专利技术资料仅供研究查看技术是否侵权等信息，商用须获得专利权人授权。该专利全部权利属于北京邮电大学，未经北京邮电大学许可，擅自商用是侵权行为。如果您想购买此专利、获得商业授权和技术合作，请联系【客服】
本文链接：http://www.vipzhuanli.com/patent/202210306938.0/，转载请声明来源钻瓜专利网。
- 上一篇：一种点阵胞元结构零件的填充方法
- 下一篇：一种YFe
