[发明专利]通用大数据实时处理开发平台及其数据处理方法在审

专利信息
申请号: 201811528297.3 申请日: 2018-12-13
公开(公告)号: CN109684377A 公开(公告)日: 2019-04-26
发明(设计)人: 赵晓炳 申请(专利权)人: 深圳市思迪信息技术股份有限公司
主分类号: G06F16/2458 分类号: G06F16/2458;G06F16/2453
代理公司: 深圳市精英专利事务所 44242 代理人: 任哲夫
地址: 518000 广东省深圳市南山区粤海*** 国省代码: 广东;44
权利要求书: 查看更多 说明书: 查看更多
摘要: 发明公开了一种通用大数据实时处理开发平台及其数据处理方法,该平台包括:数据采集模块,用于从数据库中获取多个异构数据源;数据传输模块,用于将多个异构数据源进行发布;数据处理模块,用于分别对多个异构数据源中的批量数据及流数据进行处理并调用相应的预设数据库,以构建业务应用;存储模块,用于对经处理的批量数据及流数据进行存储;输出查询模块,用于对存储的批量数据及流数据进行查询;应用程序协调服务模块,用以监测各模块的处理事件,以在某一处理事件异常时,调用相应的服务来处理对应的数据。本发明的技术方案能够提高数据处理系统的开发效率,降低开发成本。
搜索关键词: 异构数据源 批量数据 流数据 处理事件 开发平台 实时处理 数据处理 大数据 调用 数据库 存储 数据采集模块 数据处理模块 数据处理系统 数据传输模块 查询模块 存储模块 服务模块 开发效率 业务应用 应用程序 通用 构建 预设 查询 输出 监测 发布 协调 开发 服务
【主权项】:
1.一种通用大数据实时处理开发平台,其特征在于,所述通用大数据实时处理开发平台包括:数据采集模块,用于从数据库中获取多个异构数据源;数据传输模块,所述数据传输模块与数据采集模块电连接,用于将多个异构数据源进行发布;数据处理模块,所述数据处理模块与数据传输模块电连接,用于分别对多个异构数据源中的批量数据及流数据进行处理并调用相应的预设数据库,以构建业务应用,其中,所述数据处理模块预设有应用数据库;存储模块,所述存储模块与数据处理模块电连接,用于对经处理的批量数据及流数据进行存储;输出查询模块,所述输出查询模块与存储模块电连接,用于对存储的批量数据及流数据进行查询;应用程序协调服务模块,所述应用程序协调服务模块分别与数据传输模块、数据处理模块、存储模块及输出查询模块电连接,用以监测各模块的处理事件,以在某一处理事件异常时,调用相应的服务来处理对应的数据。
下载完整专利技术内容需要扣除积分,VIP会员可以免费下载。

该专利技术资料仅供研究查看技术是否侵权等信息,商用须获得专利权人授权。该专利全部权利属于深圳市思迪信息技术股份有限公司,未经深圳市思迪信息技术股份有限公司许可,擅自商用是侵权行为。如果您想购买此专利、获得商业授权和技术合作,请联系【客服

本文链接:http://www.vipzhuanli.com/patent/201811528297.3/,转载请声明来源钻瓜专利网。

×

专利文献下载

说明:

1、专利原文基于中国国家知识产权局专利说明书;

2、支持发明专利 、实用新型专利、外观设计专利(升级中);

3、专利数据每周两次同步更新,支持Adobe PDF格式;

4、内容包括专利技术的结构示意图流程工艺图技术构造图

5、已全新升级为极速版,下载速度显著提升!欢迎使用!

请您登陆后,进行下载,点击【登陆】 【注册】

关于我们 寻求报道 投稿须知 广告合作 版权声明 网站地图 友情链接 企业标识 联系我们

钻瓜专利网在线咨询

周一至周五 9:00-18:00

咨询在线客服咨询在线客服
tel code back_top