[发明专利]大数据分析方法在审
申请号: | 201810870778.6 | 申请日: | 2018-08-02 |
公开(公告)号: | CN109189842A | 公开(公告)日: | 2019-01-11 |
发明(设计)人: | 黄海 | 申请(专利权)人: | 莆田学院 |
主分类号: | G06F16/25 | 分类号: | G06F16/25;G06F16/26 |
代理公司: | 北京远大卓悦知识产权代理事务所(普通合伙) 11369 | 代理人: | 史霞 |
地址: | 351100 福建*** | 国省代码: | 福建;35 |
权利要求书: | 查看更多 | 说明书: | 查看更多 |
摘要: | 本发明公开了一种大数据分析方法,包括以下步骤:步骤100、数据采集,包括通过网络爬虫或网站公开API的方式从网站上获取数据信息,将非结构化数据从网页中抽取出来并以结构化的方式存储为统一的本地数据文件,或使用特定系统接口的方式采集数据;步骤200、对采集的数据进行清洗、转化、提取;步骤300、对经步骤200处理后的数据进行统计分析和深度挖掘;步骤400、对步骤300处理后的数据以表格、图片和文字的形式进行呈现。本发明通过对数据的采集、存储、处理和分析,然后再将经过分析的数据用文字、图片和表格等方式呈现给用户,达到数据整合的目的,快速直观。 | ||
搜索关键词: | 大数据 存储 采集 非结构化数据 处理和分析 采集数据 获取数据 数据采集 数据文件 数据整合 网络爬虫 网站公开 系统接口 统计分析 分析 结构化 网站 抽取 清洗 网页 直观 挖掘 图片 转化 统一 | ||
【主权项】:
1.一种大数据分析方法,其特征在于,包括以下步骤:步骤100、数据采集,包括通过网络爬虫或网站公开API的方式从网站上获取数据信息,将非结构化数据从网页中抽取出来并以结构化的方式存储为统一的本地数据文件,或使用特定系统接口的方式采集数据;步骤200、对采集的数据进行清洗、转化、提取;步骤300、对经步骤200处理后的数据进行统计分析和深度挖掘;步骤400、对步骤300处理后的数据以表格、图片和文字的形式进行呈现。
下载完整专利技术内容需要扣除积分,VIP会员可以免费下载。
该专利技术资料仅供研究查看技术是否侵权等信息,商用须获得专利权人授权。该专利全部权利属于莆田学院,未经莆田学院许可,擅自商用是侵权行为。如果您想购买此专利、获得商业授权和技术合作,请联系【客服】
本文链接:http://www.vipzhuanli.com/patent/201810870778.6/,转载请声明来源钻瓜专利网。
- 上一篇:一种多数据源访问方法及系统
- 下一篇:一种检验检测报告业务管理系统