[发明专利]一种大数据研发中心数据分析系统在审
申请号: | 202110466240.0 | 申请日: | 2021-04-28 |
公开(公告)号: | CN113342787A | 公开(公告)日: | 2021-09-03 |
发明(设计)人: | 方永伟 | 申请(专利权)人: | 杭州千岛湖点通信息技术有限公司 |
主分类号: | G06F16/215 | 分类号: | G06F16/215;G06F16/951 |
代理公司: | 深圳至诚化育知识产权代理事务所(普通合伙) 44728 | 代理人: | 刘英 |
地址: | 310000 浙江省杭州*** | 国省代码: | 浙江;33 |
权利要求书: | 查看更多 | 说明书: | 查看更多 |
摘要: | |||
搜索关键词: | 一种 数据 研发 中心 分析 系统 | ||
本发明公开了一种大数据研发中心数据分析系统,本发明的有益效果是,通过大数据输入分类系统将网上的语音信息、图像信息、视频信息、文本信息、行业信息、舆情信息收集并且按照SQL算法将信息数据筛分,通过数据审查评估系统按照SQL算法将云端的数据进行对比,从而达到确保不会出现重复数据,通过大数据储存显示系统将数据显示出来。
技术领域
本发明涉及大数据技术领域,特别是一种大数据研发中心数据分析系统。
背景技术
信息分析主要是根据事物、现象、数据和信息的属性、特征、本质、规律和相关性进行定性和定量分析,以发现新的知识,因此,信息分析是基于事物、现象、数据和信息之间的因果关系或相互关系,关系是指事物之间因时间、秩序、结构、运动等而产生的联系,包括时间、空间、发生和发展的逻辑,包括过程,如工业过程、商业过程等,规律,如生命的生命周期、自然运动规律等,样本微观分析:信息分析取数据,信息和现象作为对象,一般从整体或整体中选取部分样本进行分析,称为样本分析或抽样分析,在大数据服务逐渐兴起的当下,大数据的信息分析是互联网服务至关重要的一环。
现有技术中,大数据信息分析多通过机器学习算法进行分析学习,学习分析的速度及准确率主要由算力决定,而中小型公司无法满足大数据信息分析的计算学习算力要求的算力服务器配置,影响到对大数据信息分析的准确性和即时性,影响到大数据信息服务分析的发展,并且大数据中数据繁杂,重复的数据流也严重影响到数据分析的精度,不能很好的满足大数据信息分析需要,因此亟需一种大数据信息分析系统来满足算力供给不足的需要,鉴于此,针对上述问题深入研究,遂有本案产生。
发明内容
本发明的目的是为了解决上述问题,设计了一种大数据研发中心数据分析系统,解决了现有的大数据容易出现数据堆积的现象。
实现上述目的本发明的技术方案为:一种大数据研发中心数据分析系统,包括:大数据输入分类系统、数据审查评估系统以及大数据储存显示系统,所述大数据输入分类系统连接于数据审查评估系统,且所述大数据输入分类系统为数据审查评估系统子系统,所述数据审查评估系统连接于大数据储存显示系统,且所述数据审查评估系统为大数据储存显示系统子系统;
所述大数据输入分类系统包含有:大数据采集模块、大数据信息输入模块以及大数据信息鉴定模块;
所述大数据采集模块输出端连接于大数据信息输入模块,所述大数据信息输入模块输出端连接于大数据信息鉴定模块,所述大数据采集模块用于对大数据进行端口采集,所述大数据信息输入模块将大数据的基本信息输入到大数据信息鉴定模块内。
优选的,所述数据审查评估系统包含有:数据字段提取模块、数据字段筛重模块以及数据预存储模块;
所述数据字段提取模块输入端与大数据信息鉴定模块连接,所述数据字段提取模块输出端连接于数据字段筛重模块,所述数据字段筛重模块输出端连接于数据预存储模块,所述数据字段提取模块于大数据储存显示系统进行对比将数据字段中重复段落提取,所述数据字段筛重模块将提取后的数据字段进行去重,所述数据预存储模块存储筛重后待分析的数据进行短时记忆,且在大数据储存显示系统运行完成后直接删除。
优选的,所述大数据储存显示系统包含有:云计算平台资料收集模块、平台管理模块以及显示模块;
所述云计算平台资料收集模块输出端连接于平台管理模块,所述平台管理模块输出端连接于显示模块,所述云计算平台资料收集模块连接于数据预存储模块,所述云计算平台资料收集模块将数据预存储模块内的数据收录。
优选的,所述大数据采集模块互联网采集方式、爬虫采集和传感器采集中的一种。
优选的,所述大数据信息输入模块数据定义包括日期时间、大小和数据类型定义。
优选的,所述平台管理模块为云备份服务器。
优选的,所述数据字段筛重模块SQL算法。
该专利技术资料仅供研究查看技术是否侵权等信息,商用须获得专利权人授权。该专利全部权利属于杭州千岛湖点通信息技术有限公司,未经杭州千岛湖点通信息技术有限公司许可,擅自商用是侵权行为。如果您想购买此专利、获得商业授权和技术合作,请联系【客服】
本文链接:http://www.vipzhuanli.com/pat/books/202110466240.0/2.html,转载请声明来源钻瓜专利网。
- 数据显示系统、数据中继设备、数据中继方法、数据系统、接收设备和数据读取方法
- 数据记录方法、数据记录装置、数据记录媒体、数据重播方法和数据重播装置
- 数据发送方法、数据发送系统、数据发送装置以及数据结构
- 数据显示系统、数据中继设备、数据中继方法及数据系统
- 数据嵌入装置、数据嵌入方法、数据提取装置及数据提取方法
- 数据管理装置、数据编辑装置、数据阅览装置、数据管理方法、数据编辑方法以及数据阅览方法
- 数据发送和数据接收设备、数据发送和数据接收方法
- 数据发送装置、数据接收装置、数据收发系统、数据发送方法、数据接收方法和数据收发方法
- 数据发送方法、数据再现方法、数据发送装置及数据再现装置
- 数据发送方法、数据再现方法、数据发送装置及数据再现装置