[发明专利]一种基于算法流的复杂多变量数据处理方法

摘要

本发明公开了一种基于算法流的复杂数据处理方法，适合于“三高”数据(高维、高通量与高复杂度)分析处理与信息提取挖掘，属于分析化学计量学领域。本发明通过对数据处理流程的整合与优化，实现智慧型的数据分析与信息挖掘，即通过构造包含不同数据处理方法的流程优化组合，包括数据批载入、预处理、特征选择、模型构建与未知样本预测等，设置方法参数，再将待分析数据“注入”算法流中(训练集、校正集、验证集和预测集等)，实现“大数据”的快速便捷，准确智能分析。特别地，算法流构造的变化，可实现复杂数据的一键处理和多模型处理，数据处理方法及参数对分析结果的影响，以及相同数据处理方法(算法流)对不同类型数据集处理的影响等，真正达到个性化数据及数据处理方法的智慧优化组合。

主权项

一种基于算法流的复杂多变量数据处理方法，其特征在于包含以下步骤：a.依照使用者需求，预先任意选择(添加或移除)不同类别和用途的多变量数据处理算法，设置算法参数，自由排列、调换算法的运行顺序，创建包含数据处理各步骤的算法流；b.算法流中所包含的算法可修改(添加或移除)、可调节顺序、可修改算法参数；c.往算法流中任意选择/分配待分析处理的数据，依据算法流的顺序设计运行各个算法，获得每个算法运算的中间结果和最终结果；d.算法流中数据的分配及调用包括建模数据集，校正数据集、干扰数据集、验证数据集，以及预测数据集；e.算法流中具体数据处理算法及建模方法的选择，参数的不同设置实现一键数据处理，快速、智慧多模型分析，以及数据处理结果的比较和优化。