[发明专利]查询任务的处理方法、装置、电子设备及可读存储介质在审
| 申请号: | 202210303448.5 | 申请日: | 2022-03-24 |
| 公开(公告)号: | CN114691329A | 公开(公告)日: | 2022-07-01 |
| 发明(设计)人: | 方祝和;刘奇;黄东旭;崔秋 | 申请(专利权)人: | 平凯星辰(北京)科技有限公司 |
| 主分类号: | G06F9/48 | 分类号: | G06F9/48;G06F9/50;G06F16/2455;G06F16/248 |
| 代理公司: | 北京市立方律师事务所 11330 | 代理人: | 张筱宁 |
| 地址: | 100192 北京市海淀区西小口路*** | 国省代码: | 北京;11 |
| 权利要求书: | 查看更多 | 说明书: | 查看更多 |
| 摘要: | |||
| 搜索关键词: | 查询 任务 处理 方法 装置 电子设备 可读 存储 介质 | ||
本申请实施例提供了一种查询任务的处理方法、装置、电子设备及存储介质,涉及数据库查询技术领域。该方法包括:接收第二处理节点发送的待处理的查询任务;查询任务是第二处理节点基于查询请求生成的;确定查询任务的时间戳;时间戳包括查询请求的请求时间;基于请求时间调用第一处理节点的线程池中的线程资源,执行查询任务,生成查询结果。本申请实施例中的第一处理节点基于时间戳进行任务调度和任务执行,提高了查询效率。
技术领域
本申请涉及数据库查询技术领域,具体而言,本申请涉及一种查询任务的处理方法、装置、电子设备及存储介质。
背景技术
MPP(Massively Parallel Processing,大规模并行处理系统)系统是由许多松耦合处理单元组成的,在每个处理单元内都有独立的操作系统和管理数据库的实例复本,MPP系统具有很好的数据量和灵活性支持。
基于MPP架构的数据库运行于多台机器即处理单元中,在进行数据查询时,各机器通过网络连接交换数据。这些机器分为两种角色,工作者(即第一处理节点)和协调者(即第二处理节点);每种角色的机器配置有多个;现有技术中,通常基于协调者对查询任务进行全局调度,并将任务分发给各工作者进行执行;而在协调者的全局调度过程中需要引入资源同步机制,该资源同步机制的实现会导致查询任务的耗时过长,存在查询效率不高的问题。
发明内容
本申请实施例提供了一种查询任务的处理方法、装置、电子设备及计算机可读存储介质,可以解决现有技术中MPP数据库基于多处理节点查询效率不高的问题。所述技术方案如下:
根据本申请实施例的一个方面,提供了一种查询任务的处理方法,应用于第一处理节点,该方法包括:
接收第二处理节点发送的待处理的查询任务;查询任务是第二处理节点基于查询请求生成的;
确定查询任务的时间戳;时间戳包括查询请求的请求时间;
基于请求时间调用第一处理节点的线程池中的线程资源,执行查询任务,生成查询结果。
可选的,上述基于请求时间调用第一处理节点的线程池中的线程资源,执行查询任务,包括:
当请求时间早于第一时间,且基于线程池的第一容量阈值确定线程池存在空余线程资源;或者,当请求时间晚于第一时间,且基于线程池的第二容量阈值确定线程池存在空余线程资源;
将查询任务添加到第一处理节点的工作队列,基于空余线程资源执行查询任务;其中,第一容量阈值大于第二容量阈值;其中,第一时间为第一处理节点的等待队列和工作队列中的所有查询任务对应请求时间的最小时间值。
可选的,上述方法,还包括:
确定第一容量阈值与第一处理节点的工作队列的线程占用数的第一差值;
若第一差值不小于查询任务的线程需求数量,则基于线程池的第一容量阈值确定线程池存在空余线程资源。
可选的,上述方法,还包括:
确定第二容量阈值与第一处理节点的工作队列的线程占用数的第二差值;
当第二差值不小于查询任务的线程需求数量,则基于线程池的第二容量阈值确定线程池存在空余线程资源。
可选的,上述方法,还包括:
当请求时间早于第一时间,且基于线程池的第一容量阈值确定线程池不存在空余线程资源,则不执行查询任务,生成错误提示信息。
可选的,上述方法,还包括:
当请求时间晚于第一时间,且基于线程池的第二容量阈值确定线程池不存在空余线程资源,则将查询任务添加到等待队列。
可选的,上述执行查询任务之后,包括:
该专利技术资料仅供研究查看技术是否侵权等信息,商用须获得专利权人授权。该专利全部权利属于平凯星辰(北京)科技有限公司,未经平凯星辰(北京)科技有限公司许可,擅自商用是侵权行为。如果您想购买此专利、获得商业授权和技术合作,请联系【客服】
本文链接:http://www.vipzhuanli.com/pat/books/202210303448.5/2.html,转载请声明来源钻瓜专利网。





