[发明专利]一种消息处理装置和方法有效
申请号: | 201611123185.0 | 申请日: | 2016-12-08 |
公开(公告)号: | CN106817295B | 公开(公告)日: | 2020-06-05 |
发明(设计)人: | 陈金添 | 申请(专利权)人: | 上海有孚网络股份有限公司 |
主分类号: | H04L12/58 | 分类号: | H04L12/58;H04L29/08;G06F9/54 |
代理公司: | 北京华识知识产权代理有限公司 11530 | 代理人: | 乔浩刚 |
地址: | 200082 上海市*** | 国省代码: | 上海;31 |
权利要求书: | 查看更多 | 说明书: | 查看更多 |
摘要: | |||
搜索关键词: | 一种 消息 处理 装置 方法 | ||
1.一种消息处理装置,其特征在于:包括读取模块、备份模块、上报模块和处理模块;其中,
读取模块,用于通过一主线程读取消费者从服务器订阅的消息,复制读取的消息并存储至备份模块,并通知上报模块;
备份模块,用于存储读取模块读取的消息;
上报模块,用于接收到来自读取模块的通知,通过所述主线程上报偏移量信息并通知处理模块;
处理模块,其中设置有多个子线程;用于接收到来自上报模块的通知,读取备份模块中未处理的消息,将未处理的消息分派到各个子线程中;所述各个子线程对分派的消息分别进行处理,将已处理的消息从备份模块中删除或在备份模块中为已处理的消息设置已处理标识。
2.根据权利要求1所述的消息处理装置,其特征在于:还包括检测模块,
检测模块,用于检测到消费者重启时,检查所述备份模块中是否有未处理的消息;如果有未处理的消息,将未处理的消息提交给所述处理模块进行处理。
3.根据权利要求1或2所述的消息处理装置,其特征在于:所述备份模块通过日志文件或数据库存储读取模块读取的消息。
4.根据权利要求1或2所述的消息处理装置,其特征在于:所述备份模块预先设置其存储容量最大值。
5.根据权利要求1或2所述的消息处理装置,其特征在于:所述读取模块预先设置每次读取的消息数量和每条消息的最大字节数。
6.一种消息处理方法,其特征在于:包括如下步骤:
通过一主线程读取消费者从服务器订阅的消息,复制并存储读取的消息,并上报偏移量信息;
所述主线程将存储的消息中未处理的消息分配给预先设置的多个子线程,由所述多个子线程对分配的消息分别进行处理,删除或标识已处理的消息。
7.根据权利要求6所述的消息处理方法,其特征在于:如果消费者重启,检测所述存储的消息中是否有未处理的信息,如果有,对未处理的消息进行处理。
8.根据权利要求6或7所述的消息处理方法,其特征在于:预先设置每次读取的消息数量和每条消息的最大字节数。
9.根据权利要求6或7所述的消息处理方法,其特征在于:通过日志文件或数据库存储所述读取的消息。
10.根据权利要求6或7所述的消息处理方法,其特征在于:预先设置所述存储的消息的存储容量最大值。
该专利技术资料仅供研究查看技术是否侵权等信息,商用须获得专利权人授权。该专利全部权利属于上海有孚网络股份有限公司,未经上海有孚网络股份有限公司许可,擅自商用是侵权行为。如果您想购买此专利、获得商业授权和技术合作,请联系【客服】
本文链接:http://www.vipzhuanli.com/pat/books/201611123185.0/1.html,转载请声明来源钻瓜专利网。