[发明专利]一种基于分布模型下的大数据交叉索引方法

权利要求书

1.一种基于分布模型下的大数据交叉索引方法，其特征在于，包括：

获取待分析处理数据及所述待分析处理数据对应的数据类型；

根据所述数据类型对所述待分析处理数据进行聚类分析，得到若干个分类集合；

根据所述若干个分类集合基于交叉索引技术建立分布模型；

还包括：

在建立分布模型后，确定为目标分布模型，获取目标分布模型的第一模型信息；所述第一模型信息包括构建目标分布模型的待分析处理数据的类型、维度字段；

获取若干个历史分布模型及所述若干个历史分布模型的第二模型信息；所述第二模型信息包括构建历史分布模型的待分析处理数据的类型、维度字段；

根据所述第一模型信息及所述第二模型信息确定所述目标分布模型与所述若干个历史分布模型的关联度，并根据所述关联度从高到低进行排序，确定历史分布模型的排队队列；

根据所述目标分布模型进行业务处理，在业务处理过程中，根据所述目标分布模型的模型标识确定预设时间段内参与业务处理的参与频率，并将所述参与频率与预设参与频率进行比较，根据比较结果确定所述目标分布模型进行业务处理是否合法；

在确定所述目标分布模型进行业务处理合法时，确定目标数据，根据所述目标数据确定所述目标分布模型在进行数据请求时的权限等级；

根据所述权限等级确定目标关联度，并根据所述目标关联度确定所述排队队列中对应的历史分布模型，将对应的历史分布模型及对应的历史分布模型之后的历史分布模型均作为数据供方分布模型，并将所述对应的历史分布模型作为第一个数据供方分布模型；

生成数据请求信息，将所述数据请求信息发送至第一个数据供方分布模型；

获取所述第一个数据供方分布模型返回的反馈信息，根据所述反馈信息对所述数据请求信息进行更新，将更新后的数据请求信息发送至第二个数据供方分布模型；

根据第二个数据供方分布模型返回的反馈信息，对更新后的数据请求信息再次进行更新后发送至下一个数据供方分布模型；对所述数据请求信息根据得到的若干个反馈信息进行不断更新以生成目标数据；

根据所述目标数据及所述目标分布模型进行业务处理。

2.如权利要求1所述的基于分布模型下的大数据交叉索引方法，其特征在于，所述根据所述若干个分类集合基于交叉索引技术建立分布模型，包括：

将每一个分类集合中的待分析处理数据分为用于分析的维度字段、用于对维度做描述的信息字段和用于统计分析的摘要字段；

根据所述维度字段、信息字段及摘要字段建立分布模型。

3.如权利要求2所述的基于分布模型下的大数据交叉索引方法，其特征在于，所述维度字段的获取方法，包括：

获取每一个分类集合内的不同待分析处理数据之间的类内关联关系；

获取不同分类集合间的待分析处理数据之间的类间关联关系；

根据所述类内关联关系及所述类间关联关系基于交叉索引技术确定所述维度字段。

4.如权利要求2所述的基于分布模型下的大数据交叉索引方法，其特征在于，所述根据所述维度字段、信息字段及摘要字段建立分布模型，包括：

基于计算函数对所述摘要字段进行建模前的计算修改；

基于所述信息字段建立描述脚本，运行描述脚本中设计好的操作程序来进行建模；

在建模过程中，对所述维度字段包括的分析维度使用交叉索引技术进行辅助以加快数据量的访问速度，最终建立分布模型。

5.如权利要求1所述的基于分布模型下的大数据交叉索引方法，其特征在于，所述分布模型包括具体数据，且以模型文件形式存放，所述模型文件还包括数据分析统计信息。