[发明专利]基于大数据平台的数据筛选系统

说明书

本发明公开了一种基于大数据平台的数据筛选系统，涉及数据筛选技术领域。包括数据分析筛选系统和大数据平台；数据分析筛选系统通过数据传输及存储模块与大数据平台进行信息交互；大数据平台通过数据传输及存储模块分别与数据分类单元、数据库、终端设备进行信息交互；数据分类单元与若干数据采集模块连接；数据分析筛选系统包括数据提取模块、数据分析单元、图像分析单元、数据筛选单元和异常数据模块。本发明通过数据分析筛选系统和大数据平台的作用，解决了存在多重筛选、处理方式繁琐、导致筛选耗时长、效率低、筛选后的数据信息不够简单明了，对用户终端设备的配置要求高，浪费服务器资源的问题。

技术领域

本发明属于数据筛选技术领域，特别是涉及一种基于大数据平台的数据筛选系统。

背景技术

随着互联网的发展，网络中的数据信息量呈现指数式增长，随之带来了海量数据信息的问题，要想在海量数据信息中分析出所蕴含的价值，筛选出有价值的数据信息显得十分重要。

数据筛选可以提高已经收集和存储的相关数据信息的可用性，更利于后期数据分析。在现有的电子计算设备处理领域中，数据筛选是指从大量的数据中选取需要的部分，是对数据进行有条件地、有选择性地选取操作。通过数据筛选可以将不符合某些条件的记录屏蔽或删除，只需显示或保留符合条件的记录，以方便用户的使用。

传统的方式存在多重筛选、处理方式繁琐、导致筛选耗时长、效率低、筛选后的数据信息不够简单明了，对用户设备的配置要求高，浪费服务器资源的问题。

发明内容

本发明的目的在于提供基于大数据平台的数据筛选系统，通过数据分析筛选系统和大数据平台的作用，解决了存在多重筛选、处理方式繁琐、导致筛选耗时长、效率低、筛选后的数据信息不够简单明了，对用户终端设备的配置要求高，浪费服务器资源的问题。

为解决上述技术问题，本发明是通过以下技术方案实现的：

本发明为基于大数据平台的数据筛选系统，包括数据分析筛选系统和大数据平台；

所述数据分析筛选系统通过数据传输及存储模块与大数据平台进行信息交互；

所述大数据平台通过数据传输及存储模块与数据分类单元进行信息交互；所述数据分类单元与若干数据采集模块连接；所述大数据平台通过数据传输及存储模块与数据库进行信息交互；所述大数据平台通过数据传输及存储模块与终端设备进行信息交互；所述大数据平台的作用是，只需用户发送数据信息和条件信息，接收筛选数据信息，大大减少了用户数据信息的发送量和接收量，具有降低用户设备的配置要求、提高用户体验感受的优点；

所述数据分析筛选系统包括数据提取模块、数据分析单元、图像分析单元、数据筛选单元和异常数据模块；所述数据提取模块与数据分析单元连接；所述数据分析单元与图像分析单元连接；所述数据分析单元与数据筛选单元连接；所述数据分析单元与异常数据模块连接。

进一步地，所述数据采集模块向数据分类单元输出数据信息；所述数据分类单元将数据进行分类存储；所述数据分类单元向大数据平台输出数据信息。

进一步地，所述数据库接收大数据平台的更新数据信息；所述数据库向大数据平台输出数据信息。

进一步地，所述数据提取模块通过大数据平台接收数据库的数据信息；所述数据提取模块向数据分析单元输出数据信息；所述数据分析单元对数据信息进行分析、处理；

所述数据分析单元向图像分析单元输出数据信息；所述图像分析单元根据数据信息制成图表的数据信息；所述图表的数据信息为散点图、扇形图、雷达图、折线图、柱形图、表格的数据信息；所述图表的数据信息使得人们观察数据信息，显得简单明了，具有直观、形象的表达数据的信息，更好的表现数据之间的内在关系的优点；