[发明专利]一种准确性高的基于多形式处理的大数据分析系统

说明书

本发明公开了一种准确性高的基于多形式处理的大数据分析系统，包括用户交互模块，所述用户交互模块连接端连接有数据收集模块和综合分析模块，所述数据收集模块连接端连接有数据仓库，所述数据仓库连接端连接有数据统计模块、数据对比模块和数据挖掘模块，所述综合分析模块连接端分别与数据统计模块、数据对比模块和数据挖掘模块连接。本发明通过多源数据综合单元分别接收统计综合单元、对比综合单元和发掘综合单元的分析结果，并对分析结果进行综合运算，得到数据综合结果，并通过反馈单元将数据综合结果传输至输出单元，然后通过输出单元反馈数据综合结果，通过多样化处理大数据，提高大数据的有效性和准确性。

技术领域

本发明涉及大数据分析领域，具体涉及一种准确性高的基于多形式处理的大数据分析系统。

背景技术

大数据技术，指的是一种规模大到在获取、存储、管理、分析方面大大超出了传统数据库软件工具能力范围的数据集合，具有海量的数据规模、快速的数据流转、多样的数据类型和价值密度低四大特征。数据多样化的形成主要有两方面的原因：一是数据来源多，有搜索引擎、社交网络、通话记录、传感器等等；二是数据格式多，有结构数据、半结构数据和非结构数据，随着大数据时代的来临，大数据分析也应运而生。

目前，现有的大数据分析通常使用单一的分析方式，在处理一些多样化的数据时，其有效性和准确性较差。

因此，发明一种准确性高的基于多形式处理的大数据分析系统来解决上述问题很有必要。

发明内容

本发明的目的是提供一种准确性高的基于多形式处理的大数据分析系统，通过多源数据综合单元分别接收统计综合单元、对比综合单元和发掘综合单元的分析结果，并对分析结果进行综合运算，得到数据综合结果，并通过反馈单元将数据综合结果传输至输出单元，然后通过输出单元反馈数据综合结果，以解决技术中的上述不足之处。

为了实现上述目的，本发明提供如下技术方案：一种准确性高的基于多形式处理的大数据分析系统，包括用户交互模块，所述用户交互模块连接端连接有数据收集模块和综合分析模块，所述数据收集模块连接端连接有数据仓库，所述数据仓库连接端连接有数据统计模块、数据对比模块和数据挖掘模块，所述综合分析模块连接端分别与数据统计模块、数据对比模块和数据挖掘模块连接；

所述用户交互模块用于人机交互，输入获取数据的检索范围，输出大数据分析结果；

所述数据收集模块根据用户需求，通过多源渠道获取数据；

所述数据仓库用于存储数据收集模块获取的数据；

所述数据统计模块用于提取数据，并依据统计学知识对数据进行处理；

所述数据对比模块用于提取数据，对数据进行横向对比和纵向对比处理；

所述数据挖掘模块用于提取数据，通过人工智能对数据进行深度处理，发掘数据隐藏的规律；

所述综合分析模块用于综合数据统计模块、数据对比模块和数据挖掘模块的处理结果，对大数据进行综合分析处理。

优选的，所述用户交互模块包括输入单元和输出单元，所述输入单元通过人机交互，根据用户需求输入收集数据的主题范围，所述输出单元用于接收综合分析模块的分析处理结果并对用户进行反馈。

优选的，所述数据收集模块包括网络爬取单元和大数据平台交互单元，所述网络爬取单元用于连接互联网，根据用户输入的主题范围在互联网网页中不断的获取与主题相关联的数据，所述大数据平台交互单元通过与主题相关联的大数据平台进行数据交互，获取相关数据。

优选的，所述数据仓库包括数据预处理单元和数据存储单元，所述数据预处理单元用于网络爬取单元和大数据平台交互单元获取数据的预处理，对数据进行筛选，剔除重复数据和垃圾数据，所述数据存储单元用于存储数据预处理单元处理后的数据。