[发明专利]任务处理方法及装置有效
申请号: | 201110444845.6 | 申请日: | 2011-12-27 |
公开(公告)号: | CN102571568A | 公开(公告)日: | 2012-07-11 |
发明(设计)人: | 杨康;袁瑞峰 | 申请(专利权)人: | 北京奇虎科技有限公司 |
主分类号: | H04L12/56 | 分类号: | H04L12/56;G06F9/38 |
代理公司: | 北京润泽恒知识产权代理有限公司 11319 | 代理人: | 苏培华 |
地址: | 100088 北京市西城区新*** | 国省代码: | 北京;11 |
权利要求书: | 查看更多 | 说明书: | 查看更多 |
摘要: | |||
搜索关键词: | 任务 处理 方法 装置 | ||
1.一种任务处理方法,其特征在于,包括:
多道流水线处理系统的分布式消息队列中的至少一个组件接收到任务消息,其中,所述多道流水线处理系统中设置有连接池,所述连接池用于存储所述分布式消息队列中各个组件之间的网络连接的信息;
根据所述网络连接的信息,从所述连接池中选择一个有效的网络连接;
使用选择的所述有效的网络连接发送所述任务消息,进行所述任务消息所请求的任务处理。
2.根据权利要求1所述的方法,其特征在于,所述分布式消息队列的每个组件中均设置有连接池,每个所述组件的连接池用于存储本组件与其它组件之间的网络连接的信息;
所述根据所述网络连接的信息,从所述连接池中选择一个有效的网络连接的步骤包括:根据所述网络连接的信息,从接收到所述任务消息的组件的所述连接池中选择一个有效的网络连接。
3.根据权利要求1或2所述的方法,其特征在于,还包括:
若使用选择的所述有效的网络连接发送所述任务消息失败,则重新选择一个有效的网络连接发送所述任务消息,并中断失败的网络连接并释放其资源,将该网络连接设置为失效的网络连接;记录该网络连接中断的时间点,在设定的时间间隔内,不再使用该网络连接发送任何任务消息。
4.根据权利要求3所述的方法,其特征在于,还包括:
当经过所述设定的时间间隔后,接收到新的任务消息,则尝试恢复所述中断的网络连接。
5.根据权利要求4所述的方法,其特征在于,还包括:
若尝试恢复所述中断的网络连接失败,则重新设置该网络连接中断的时间点,在所述设定的时间间隔内,不再使用该网络连接发送任何任务消息;若尝试恢复所述中断的网络连接成功,则将该网络连接设置为有效的网络连接。
6.根据权利要求1所述的方法,其特征在于,在所述根据所述网络连接的信息,从所述连接池中选择一个有效的网络连接的步骤之前,还包括:
根据所述网络连接的信息,判断所述连接池中是否存在有效的网络连接;
若存在,则执行所述根据所述网络连接的信息,从所述连接池中选择一个有效的网络连接的步骤;
若不存在,将所述连接池中所有的网络连接的中断时间点设置为当前时间点,并尝试恢复所述连接池中所有的网络连接。
7.根据权利要求1所述的方法,其特征在于,还包括:
当使用选择的所述有效的网络连接发送所述任务消息成功完成后,将该网络连接返回给所述连接池,并判断该网络连接的当前连接状态,根据判断结果,将该网络连接设置为有效的网络连接或者无效的网络连接。
8.根据权利要求2所述的方法,其特征在于,在所述多道流水线处理系统的分布式消息队列中的至少一个组件接收到任务消息的步骤之前,还包括:
在所述分布式消息队列的各个组件中设置负载均衡算法。
9.根据权利要求8所述的方法,其特征在于,所述根据所述网络连接的信息,从接收到所述任务消息的组件的所述连接池中选择一个有效的网络连接的步骤包括:
根据所述网络连接的信息,按照所述负载均衡算法从接收到所述任务消息的组件的所述连接池中选择一个有效的网络连接。
10.根据权利要求9所述的方法,其特征在于,所述分布式消息队列包括消息发布组件、消息中转组件和消息处理组件;
在所述多道流水线处理系统的分布式消息队列中的至少一个组件接收到任务消息的步骤之前,还包括:将所述分布式消息队列的各个组件中的连接池分别封装为网络连接循环队列,并且在所述消息中转组件中设置消息优先级队列。
11.根据权利要求10所述的方法,其特征在于,
所述根据所述负载均衡算法和所述网络连接的信息,从接收到所述任务消息的组件的所述连接池中选择一个有效的网络连接的步骤包括:根据所述网络连接的信息,从接收到所述任务消息的组件的所述网络连接循环队列的头部开始,选择一个有效的网络连接;
所述方法还包括:当使用选择的所述有效的网络连接发送所述任务消息成功完成后,将该网络连接返回所述网络连接循环队列的尾部。
该专利技术资料仅供研究查看技术是否侵权等信息,商用须获得专利权人授权。该专利全部权利属于北京奇虎科技有限公司,未经北京奇虎科技有限公司许可,擅自商用是侵权行为。如果您想购买此专利、获得商业授权和技术合作,请联系【客服】
本文链接:http://www.vipzhuanli.com/pat/books/201110444845.6/1.html,转载请声明来源钻瓜专利网。