[发明专利]一种基于混合引擎的大数据处理方法及系统在审
申请号: | 201910261094.0 | 申请日: | 2019-04-02 |
公开(公告)号: | CN109960701A | 公开(公告)日: | 2019-07-02 |
发明(设计)人: | 刘家祥 | 申请(专利权)人: | 福建奇点时空数字科技有限公司 |
主分类号: | G06F16/2455 | 分类号: | G06F16/2455;G06F16/248 |
代理公司: | 北京劲创知识产权代理事务所(普通合伙) 11589 | 代理人: | 陆滢炎 |
地址: | 361000 福建省厦门市软件园*** | 国省代码: | 福建;35 |
权利要求书: | 查看更多 | 说明书: | 查看更多 |
摘要: | 一种基于混合引擎的大数据处理方法,包括:采集用户在综合查询用户界面提交的静态数据或动态数据的查询请求数据;判断用户在综合查询用户界面提交的数据查询请求为静态数据或动态数据;根据数据查询类别选择MapReduce批处理引擎或Storm流式计算引擎处理数据;向用户反馈静态数据或动态数据的查询结果。一种基于混合引擎的大数据处理系统,包括数据采集模块、判断模块、数据处理模块和数据反馈模块;数据采集模块与判断模块连接;判断模块与数据处理模块连接;数据处理模块与数据反馈模块连接。本发明根据数据类别选择MapReduce批处理引擎或Storm流式计算引擎处理数据,从而实现针对性的数据处理,并将处理后的数据结果反馈给用户,使用户能对不同类别数据进行查询。 | ||
搜索关键词: | 数据处理模块 动态数据 混合引擎 静态数据 判断模块 数据处理 批处理 数据采集模块 数据反馈模块 处理数据 计算引擎 用户界面 查询 流式 引擎 查询请求数据 数据查询请求 数据处理系统 数据类别选择 查询结果 类别数据 类别选择 数据查询 数据结果 用户反馈 采集 反馈 | ||
【主权项】:
1.一种基于混合引擎的大数据处理方法,其特征在于,包括:采集用户在综合查询用户界面提交的静态数据或动态数据的查询请求数据;判断用户在综合查询用户界面提交的数据查询请求为静态数据或动态数据;根据数据查询类别选择MapReduce批处理引擎或Storm流式计算引擎处理数据;向用户反馈静态数据或动态数据的查询结果。
下载完整专利技术内容需要扣除积分,VIP会员可以免费下载。
该专利技术资料仅供研究查看技术是否侵权等信息,商用须获得专利权人授权。该专利全部权利属于福建奇点时空数字科技有限公司,未经福建奇点时空数字科技有限公司许可,擅自商用是侵权行为。如果您想购买此专利、获得商业授权和技术合作,请联系【客服】
本文链接:http://www.vipzhuanli.com/patent/201910261094.0/,转载请声明来源钻瓜专利网。