[发明专利]大数据资源处理方法、装置、终端及存储介质

摘要

一种大数据资源处理方法，包括：初始化多层队列；根据队列的初始资源确定每层队列的性能标识；当接收到客户端输出的任务处理请求时，监听多层队列中每层队列的剩余资源量；采用任务时长消耗模型预测出任务消耗的预计时长；根据任务消耗的预计时长确定任务消耗的预计资源量；将所述多层队列中剩余资源量大于预计资源量的队列确定为待选队列；从待选队列中匹配出性能标识为第一性能标识的目标队列；将任务分配给所述目标队列。本发明还提供一种大数据资源处理装置、终端及计算机可读存储介质。本发明通过预测任务消耗的资源量，并结合每层队列的剩余资源量及队列的性能标识来综合确定目标队列，节约整体任务的运行时间，提升集群资源的利用率。