[发明专利]智能大数据系统、提供智能大数据服务的方法和设备

摘要

本发明提供了一种智能大数据系统、提供智能大数据服务的方法和设备，该系统包括：数据仓库、存储设备以及包含多个计算节点的集群；数据仓库，用于存储从用户获取的任务数据；集群中的至少一个计算节点上包括资源调度组件，用于为任务进行资源调度，确定执行任务的计算节点；执行任务的计算节点上包括模型训练组件和/或预测组件；模型训练组件，用于依据任务数据，从存储设备中调用对应类型的学习模型；利用任务数据包括的样本数据和训练目标，对学习模型进行训练，得到任务对应的预测模型并存储于存储设备；预测组件，用于依据任务数据，从存储设备中调用对应类型的预测模型；将任务数据包括的预测数据输入预测模型，得到预测模型输出的预测结果。

主权项

一种智能大数据系统，其特征在于，该系统包括：数据仓库、存储设备以及包含多个计算节点的集群；所述数据仓库，用于存储从用户获取的任务数据；集群中的至少一个计算节点上包括资源调度组件，用于为所述任务进行资源调度，确定执行所述任务的计算节点；执行所述任务的计算节点包括模型训练组件和/或预测组件；所述模型训练组件，用于依据所述任务数据，从存储设备中调用对应类型的学习模型；利用所述任务数据包括的样本数据和训练目标，对所述学习模型进行训练，得到所述任务对应的预测模型并存储于存储设备；所述预测组件，用于依据所述任务数据，从存储设备中调用对应类型的预测模型；将所述任务数据包括的预测数据输入所述预测模型，得到所述预测模型输出的预测结果。