[发明专利]一种分布式实时计算系统中计数对账的方法及装置在审
申请号: | 201610889993.1 | 申请日: | 2016-10-12 |
公开(公告)号: | CN106445790A | 公开(公告)日: | 2017-02-22 |
发明(设计)人: | 曾攀;范卫卫;温宗臣 | 申请(专利权)人: | 北京集奥聚合科技有限公司 |
主分类号: | G06F11/30 | 分类号: | G06F11/30;G06F17/30 |
代理公司: | 北京和信华成知识产权代理事务所(普通合伙)11390 | 代理人: | 胡剑辉 |
地址: | 100085 北京市海*** | 国省代码: | 北京;11 |
权利要求书: | 查看更多 | 说明书: | 查看更多 |
摘要: | 本发明公开一种分布式实时计算系统中计数对账的方法,其实现了实时计算中计数对账过程中时间维度的可控性,规避mysql锁争用问题。该方法包括:(1)创建存储spout和bolt计数的数据库表;(2)spout处理过程中对消息进行计数并定时将计数信息刷新到mysql数据库;(3)bolt处理过程中对消息进行计数并定时将计数信息刷新到mysql数据库;(4)topology部署到storm集群,终止topology时在spout的关闭方法和bolt的清除方法中加入刷新数据库的操作。还有分布式实时计算系统中计数对账的装置。 | ||
搜索关键词: | 一种 分布式 实时 计算 系统 计数 方法 装置 | ||
【主权项】:
一种分布式实时计算系统中计数对账的方法,其特征在于:该方法包括以下步骤:(1)创建存储spout和bolt计数的数据库表;(2)spout处理过程中对消息进行计数并定时将计数信息刷新到mysql数据库;(3)bolt处理过程中对消息进行计数并定时将计数信息刷新到mysql数据库;(4)topology部署到storm集群,终止topology时在spout的关闭方法和bolt的清除方法中加入刷新数据库的操作。
下载完整专利技术内容需要扣除积分,VIP会员可以免费下载。
该专利技术资料仅供研究查看技术是否侵权等信息,商用须获得专利权人授权。该专利全部权利属于北京集奥聚合科技有限公司,未经北京集奥聚合科技有限公司许可,擅自商用是侵权行为。如果您想购买此专利、获得商业授权和技术合作,请联系【客服】
本文链接:http://www.vipzhuanli.com/patent/201610889993.1/,转载请声明来源钻瓜专利网。