[发明专利]一种数据实时交互式挖掘流建模分析系统

说明书

本发明提供了一种数据实时交互式挖掘流建模分析系统，包括：由多个功能模块组成，每个功能模块用于完成对应的分析处理功能，其中，所述功能模块是基于挖掘处理作业对象对应的功能，来对功能组件进行划分得到的；交互式界面，用于对接使用用户和所述处理分析模块之间的交互式互动，得到挖掘流程；挖掘流程机，用于对所述挖掘流程进行分析，得到挖掘逻辑，并基于所述挖掘逻辑构建计算分析逻辑，且将所述计算分析逻辑部署执行，完成建模；在保证分析处理时效性的前提下，保证了分析处理的实时交互性和分析的灵活性。

技术领域

本发明涉及数据挖掘处理和智能分析建模领域，特别涉及一种数据实时交互式挖掘流建模分析系统。

背景技术

近年来，数据挖掘技术引起了信息产业界的极大关注，其主要原因是数据量的快速增长以及数据采集、数据存储、数据分析处理、以及计算机硬件性能的快速增长带来了数据分析处理的极大需求，并且迫切需要将这些数据转换成有用的信息和知识,广泛应用于国民经济发展的各个行业。

数据挖掘的特点是需要从大量数据中提取有用的信息，首先，面对大量数据，处理技术需要借助大数据的相关大数据存储、分布式计算等技术实现数据的分析挖掘，其次，大数据的特点是数据价值密度低，需要有效的途径挖掘有用的信息，那么这个有效的途径需要借助机器学习等人工智能算法实现。

基于以上，那么一款数据挖掘工具需要具备大数据处理的能力，同时具备机器学习相关算法分析的能力。同时，在大数据人工智能化的信息应用大背景下，数据挖掘分析广泛应用于各个行业中，需要淡化使用数据挖掘分析的IT技术需求，将算法和大数据处理的逻辑基于一种流程化交互式处理的形式实现将是一个行业普遍化的应用需求。

数据挖掘行业内数据挖掘平台基本按照挖掘逻辑进行功能组件化，通过交互式的界面配置完成对应的建模逻辑，然而，在实现建模分析逻辑上损失了灵活性，同时，交互式界面仅进行配置参数交互，由于大批量数据进行处理时，在配置建模阶段是很难进行数据和配置的实时交互，降低了数据分析建模的实时响应程度。

发明内容

本发明提供一种一种数据实时交互式挖掘流建模分析系统，通过交互式界面和分析处理模块的交互式互动，实现了数据和配置的实时交互，在保证分析处理时效性的前提下，保证了分析处理的实时交互性和分析的灵活性。

本发明提供一种数据实时交互式挖掘流建模分析系统，包括：

处理分析模块，由多个功能模块组成，每个功能模块用于完成对应的分析处理功能，其中，所述功能模块是基于挖掘处理作业对象对应的功能，来对功能组件进行划分得到的；

交互式界面，用于对接使用用户和所述处理分析模块之间的交互式互动，得到挖掘流程；

挖掘流程机，用于对所述挖掘流程进行分析，得到挖掘逻辑，并基于所述挖掘逻辑构建计算分析逻辑，且将所述计算分析逻辑部署执行，完成建模。

在一种可能实现的方式中，

还包括：功能获取模块，用于获取所述挖掘处理作业对象对应的功能，包括：

编译单元，用于获取用户定义的操作配置信息，基于所述操作配置信息构建挖掘模型配置文件，并将所述挖掘模型配置文件编译成对应的挖掘处理作业对象；

获取单元，用于将所述挖掘处理作业对象发送至分布式集群计算资源处进行分析，获取所述挖掘处理作业对象对应的功能。

在一种可能实现的方式中，

还包括：划分模块，用于基于所述挖掘处理作业对象对应的功能，对功能组件进行划分得到多个功能模块，包括：

解析单元，用于对所述挖掘处理作业对象对应的功能进行解析，得到功能对应的部署信息；