[发明专利]一种扩展Kafka消费能力开发方法有效
| 申请号： | 202010972957.8 | 申请日： | 2020-09-16 |
| 公开（公告）号： | CN112199202B | 公开（公告）日： | 2023-04-07 |
| 发明（设计）人： | 杨为琛;伺彦伟;祁洪波;鲁震;杨旭光;张建伟;张怀京;贺志勇 | 申请（专利权）人： | 河北航天信息技术有限公司 |
| 主分类号： | G06F9/52 | 分类号： | G06F9/52;G06F9/48;G06Q40/12 |
| 代理公司： | 哈尔滨市阳光惠远知识产权代理有限公司 23211 | 代理人： | 刘景祥 |
| 地址： | 050090 河北省石家庄*** | 国省代码： | 河北;13 |
| 权利要求书： | 查看更多 | 说明书： | 查看更多 |
| 摘要： | 本发明公开了一种扩展Kafka消费能力开发方法，属于财税数据处理领域。在采集端增加拦截器，将从采集端采集的数据中增加发票号码和发票代码组成的新字段，将所述新字段推送到Kafka分区的分布键；在消费端增加消费管理中心插件，使用消费管理中心管理从Kafka分区拉取的数据，创建并管理消费线程，将数据分配给消费线程，当所有线程中数据正确消费完成时，将偏移量提交给Kafka分区再拉取下一批数据；如果某个线程出现错误，管理中心插件将未消费的数据重新分配给其他线程处理直至本批数据正确消费完成。本发明使有限服务器资源下流式数据处理在消费端增强了消费能力，保证业务系统数据及时、准确，为系统使用人员提供持续数据服务。 | ||
| 搜索关键词： | 一种 扩展 kafka 消费 能力 开发 方法 | ||
【主权项】：
暂无信息
下载完整专利技术内容需要扣除积分，VIP会员可以免费下载。
该专利技术资料仅供研究查看技术是否侵权等信息，商用须获得专利权人授权。该专利全部权利属于河北航天信息技术有限公司，未经河北航天信息技术有限公司许可，擅自商用是侵权行为。如果您想购买此专利、获得商业授权和技术合作，请联系【客服】
本文链接：http://www.vipzhuanli.com/patent/202010972957.8/，转载请声明来源钻瓜专利网。
- 上一篇：一种聚热罩的束源结构
- 下一篇：一种快速污水溯源的方法及系统
