[发明专利]一种数据处理与分析系统

说明书

本发明公开了一种数据处理与分析系统，包括数据存储模块、数据提取模块、数据处理模块、数据分析模块和输出模块，所述数据存储模块存储全部数据，数据提取模块根据需要提取一定的数据用于计算，本发明通过数据提取模块中的异常数据单元，首先对异常数据进行发掘，对异常数据的位置进行确定，并根据位置确定可能造成异常数据的相关数据，对相关数据的促进和降低影响进行计算，最后计算异常数据的正常取值，使异常数据调整至正常数据，方便后续数据的再处理和再分析，从而使数据处理和分析的精确度更高，节省数据整体的处理和分析时间，使数据处理和分析的效果更好。

技术领域

本发明涉及数据处理与分析技术领域，具体为一种数据处理与分析系统。

背景技术

数据处理的基本目的是从大量的、可能是杂乱无章的、难以理解的数据中抽取并推导出对于某些特定的人们来说是有价值、有意义的数据，数据分析是指用适当的统计分析方法对收集来的大量数据进行分析，将它们加以汇总和理解并消化，以求最大化地开发数据的功能，发挥数据的作用，数据分析是为了提取有用信息和形成结论而对数据加以详细研究和概括总结的过程；

但是目前的数据处理与分析系统，没有对异常数据的相关数据位置进行查找，对异常数据的分析范围较广泛，对于异常数据的分析任务量较重，分析时间较长，导致异常数据不能及时的确定，分析的精准度不高。

发明内容

本发明提供一种数据处理与分析系统，可以有效解决上述背景技术中提出目前的数据处理与分析系统，没有对异常数据的相关数据位置进行查找，对异常数据的分析范围较广泛，对于异常数据的分析任务量较重，分析时间较长，导致异常数据不能及时的确定，分析的精准度不高的问题。

为实现上述目的，本发明提供如下技术方案：一种数据处理与分析系统，包括数据存储模块、数据提取模块、数据处理模块、数据分析模块和输出模块；

数据选择单元对用户需求进行分析，确定查找的关键词；

自定义提取单元在数据存储模块中通过关键词查找关联数据，并在查找列表中选择排序第一的数据组作为一次关联数据组；

异常数据单元对一次关联数据组中的异常数据进行查找；

在自定义提取单元中输入异常数据，查找时间早于一次关联数据组的同类型的数据组，在查找列表中选择排序第一的数据组作为二次关联数据组；

在自定义提取单元中输入二次关联数据组中的异常数据，查找时间早于二次关联数据组的同类型的数据组，在查找列表中选择排序第一的数据组作为三次关联数据组；

一次关联数据组中的数据记为A₁、A₂、A₃…Ai；

二次关联数据组中的数据记为B₁、B₂、B₃…Bi；

三次关联数据组中的数据记为C₁、C₂、C₃…Ci；

异常数据查找过程首先对一次关联数据之间的偏差进行计算，计算的公式如下：

式中，k表示一次关联数据组中的第k个数据，k∈[1，2，3…i]；

X_k表示一次关联数据组中第k个数据的偏差；

ΔAi表示一次关联数据组中相邻数据之间的差值；

ΔAi具体通过下式表示：ΔAi＝Ai-A(i-1)；

提取式中X_k大于1时对应的数据Ak，则Ak为异常数据；