[发明专利]数据处理方法、系统及非瞬时性计算机可读存储介质在审
申请号: | 202110075480.8 | 申请日: | 2021-01-20 |
公开(公告)号: | CN113760983A | 公开(公告)日: | 2021-12-07 |
发明(设计)人: | 冯志恒;李源;尹翔;高伟 | 申请(专利权)人: | 北京沃东天骏信息技术有限公司;北京京东世纪贸易有限公司 |
主分类号: | G06F16/2455 | 分类号: | G06F16/2455;G06F16/182 |
代理公司: | 中国贸促会专利商标事务所有限公司 11038 | 代理人: | 姜雍;许蓓 |
地址: | 100176 北京市大兴区北京经济*** | 国省代码: | 北京;11 |
权利要求书: | 查看更多 | 说明书: | 查看更多 |
摘要: | 本公开提供了一种数据处理方法、系统及非瞬时性计算机可读存储介质,涉及计算机技术领域。其中的数据处理方法包括:将从客户端接收的流数据写入消息中间件;通过结构化流处理引擎对流数据进行实时计算,获得实时计算结果;将实时计算结果以更新或插入Upsert方式分别写入数据湖和联机分析处理数据库;通过数据湖接收并响应离线的数据请求,通过联机分析处理数据库接收并响应实时的数据请求。本公开实现了流批一体的数据处理方法,既能够节省计算资源和存储资源,又能够保障离线的数据请求与实时的数据请求在响应结果上的一致性,从而为开发和维护数据处理系统提供了便利。 | ||
搜索关键词: | 数据处理 方法 系统 瞬时 计算机 可读 存储 介质 | ||
【主权项】:
暂无信息
下载完整专利技术内容需要扣除积分,VIP会员可以免费下载。
该专利技术资料仅供研究查看技术是否侵权等信息,商用须获得专利权人授权。该专利全部权利属于北京沃东天骏信息技术有限公司;北京京东世纪贸易有限公司,未经北京沃东天骏信息技术有限公司;北京京东世纪贸易有限公司许可,擅自商用是侵权行为。如果您想购买此专利、获得商业授权和技术合作,请联系【客服】
本文链接:http://www.vipzhuanli.com/patent/202110075480.8/,转载请声明来源钻瓜专利网。