[发明专利]一种文件系统任务调度方法、装置、设备及可读存储介质

说明书

本发明公开了一种文件系统任务调度方法，包括：判断总队列中待处理任务的数量是否小于第一阈值；若待处理任务的数量小于第一阈值，则判断前台任务队列中前台任务的数量是否小于第二阈值；若前台任务的数量小于第二阈值，则分别从各个任务队列中获取与任务队列对应的第一数量个任务，并将任务放入总队列的队尾；其中，任务队列包括前台任务队列和多个后台任务队列；若前台任务的数量不小于第二阈值，则分别从各个任务队列中获取与任务队列对应的第二数量个任务，并将任务放入总队列的队尾；该方法实现了根据前台任务的积压程度灵活分配计算资源的功能；本发明还提供了一种文件系统任务调度装置、设备及计算机可读存储介质，同样具有上述有益效果。

技术领域

本发明涉及分布式文件系统技术领域，特别涉及一种文件系统任务调度方法、文件系统任务调度装置、文件系统任务调度设备及计算机可读存储介质。

背景技术

分布式文件系统中，在支持用户应用发起的文件读写这些前台业务的同时，往往还需要同时执行大量的后台任务，例如常见的文件分级迁移功能，系统后台根据用户设置的迁移规则，自动将文件的物理存放位置，从某些硬盘迁移到另一些硬盘；或者如文件删除功能，系统后台扫描待删除文件列表，将文件数据真正从磁盘上删除。由于前台任务与后台任务共用系统处理能力，因此往往会引发资源抢占冲突。为避免后台任务影响前台业务性能，影响用户使用感受，现有任务调度方法控制后台任务本身占用的资源，例如设置后台任务的并发数量、线程数量等。通过限制后台任务所使用的资源，为前台任务提供足够的资源。但是现有任务调度方法无法灵活分配计算资源，在前台任务很少的时候也限制后台任务的执行，给文件系统的运行带来很大不便。

因此，如何解决现有任务调度方法无法灵活分配计算资源，给文件系统的运行带来很大不便的问题，是本领域技术人员需要解决的技术问题。

发明内容

有鉴于此，本发明的目的在于提供一种文件系统任务调度方法、文件系统任务调度装置、文件系统任务调度设备及计算机可读存储介质，解决了现有任务调度方法无法灵活分配计算资源，给文件系统的运行带来很大不便的问题。

为解决上述技术问题，本发明提供了一种文件系统任务调度方法，包括：

判断总队列中待处理任务的数量是否小于第一阈值；

若所述待处理任务的数量小于所述第一阈值，则判断前台任务队列中前台任务的数量是否小于第二阈值；

若所述前台任务的数量小于所述第二阈值，则分别从各个任务队列中获取与所述任务队列对应的第一数量个任务，并将所述任务放入所述总队列的队尾；其中，所述任务队列包括所述前台任务队列和多个后台任务队列；

若所述前台任务的数量不小于所述第二阈值，则分别从各个所述任务队列中获取与所述任务队列对应的第二数量个任务，并将所述任务放入所述总队列的队尾。

可选的，在所述判断总队列中待处理任务的数量是否小于第一阈值之前，还包括：

从所述总队列的前端开始依次执行所述总队列中的所述待处理任务；

获取用户应用发送的前台任务，并将所述前台任务放入所述前台任务队列的队尾；

将文件系统产生的后台任务按照任务类型放入对应的所述后台任务队列的队尾。

可选的，所述第一数量的计算过程，包括：

利用所述第一阈值和所述总队列的长度计算空闲长度；

获取各个所述任务队列的优先级系数组成的优先级比例，利用所述优先级比例和所述空闲长度计算各个所述任务队列对应的所述第一数量。

可选的，所述第二数量的计算过程，包括：

获取各个任务队列对应的积压缩放系数；