[发明专利]一种业务处理方法及系统有效
申请号: | 201611009797.7 | 申请日: | 2016-11-16 |
公开(公告)号: | CN108076098B | 公开(公告)日: | 2021-01-26 |
发明(设计)人: | 王英杰 | 申请(专利权)人: | 北京京东尚科信息技术有限公司;北京京东世纪贸易有限公司 |
主分类号: | H04L29/08 | 分类号: | H04L29/08;G06F16/18 |
代理公司: | 北京德琦知识产权代理有限公司 11018 | 代理人: | 梁少微;王丽琴 |
地址: | 100080 北京市海淀区杏石口路6*** | 国省代码: | 北京;11 |
权利要求书: | 查看更多 | 说明书: | 查看更多 |
摘要: | |||
搜索关键词: | 一种 业务 处理 方法 系统 | ||
本发明公开了一种业务处理方法及系统,方法包括:二进制日志文件抽取服务器获取更改数据库任务记录时形成的二进制日志文件,对所述二进制日志文件进行解析并组装成消息体发送到消息队列子系统的消息队列中;分布式任务处理服务器集群中的任一分布式任务处理服务器监听到消息队列子系统消息队列中的消息体后解析所述消息体,在验证所述消息体的有效性之后,根据消息体中数据库名称确定任务记录所在的数据库,根据消息体中任务ID确定该数据库中相应的任务记录,根据任务记录中的任务状态,判断任务是否已成功执行;如果否,则根据任务记录中的任务类型进行相应的任务处理。采用本发明能够解决现有技术任务处理服务器单点故障的问题。
技术领域
本发明涉及数据处理技术领域,特别涉及一种业务处理方法及系统。
背景技术
如今,随着互联网行业的快速发展,大数据、高并发几乎是所有系统面临的共同的挑战。现有业务处理系统中的任务处理一般都是由多台任务处理服务器构成,其中一台任务处理服务器为主服务器,其他任务处理服务器为从服务器。主任务处理服务器定时扫描数据库中的任务记录,根据任务记录的任务类型进行相应的任务处理。如果主任务处理服务器出现故障,则重新选择主任务处理服务器进行业务处理。
由上述可以看出,现有技术中一个任务只能在任务处理服务器的单机、单进程中执行,会存在很多问题:
一、一旦发生任务处理服务器异常宕机,将无法确保任务的正常处理。
二、由于任务处理单机,在并发高、待处理任务数据量大的时候,会存在服务资源(CPU、内存等)过载,可能导致服务不可用,任务处理存在性能瓶颈,必将导致待处理任务积压,可能会严重影响生产流程。
三、现有技术中只有主任务处理服务器进行任务处理,未能将所有的任务处理服务器都利用起来处理任务,造成了部分任务处理服务器资源的闲置、浪费,未能合理利用任务处理服务器资源。
发明内容
本发明的目的在于提供一种业务处理方法及系统,能够解决现有技术任务处理服务器单点故障的问题。
为实现上述发明目的,本发明提供了一种业务处理方法,该方法包括:
二进制日志文件抽取服务器获取更改数据库任务记录时形成的二进制日志文件,对所述二进制日志文件进行解析并组装成消息体发送到消息队列子系统的消息队列中;所述任务记录包括任务ID、任务类型、任务状态、任务执行失败次数;所述二进制日志文件记录了对数据库中任务记录的更改操作,所述组装成的消息体包括字段:数据库名称、任务ID、更改操作的具体类型;
分布式任务处理服务器集群中的任一分布式任务处理服务器监听到消息队列子系统消息队列中的消息体后解析所述消息体,在验证所述消息体的有效性之后,根据消息体中数据库名称确定任务记录所在的数据库,根据消息体中任务ID确定该数据库中相应的任务记录,根据任务记录中的任务状态,判断任务是否已成功执行;如果否,则根据任务记录中的任务类型进行相应的任务处理。
为实现上述发明目的,本发明还提供了一种业务处理系统,该系统包括:
二进制日志文件抽取服务器,用于获取更改数据库任务记录时形成的二进制日志文件,对所述二进制日志文件进行解析并组装成消息体发送到消息队列子系统的消息队列中;所述任务记录包括任务ID、任务类型、任务状态、任务执行失败次数;所述二进制日志文件记录了对数据库中任务记录的更改操作,所述组装成的消息体包括字段:数据库名称、任务ID、更改操作的具体类型;
消息队列子系统,用于为消息体提供消息队列,以使分布式任务处理服务器监听到消息队列中的消息体;
该专利技术资料仅供研究查看技术是否侵权等信息,商用须获得专利权人授权。该专利全部权利属于北京京东尚科信息技术有限公司;北京京东世纪贸易有限公司,未经北京京东尚科信息技术有限公司;北京京东世纪贸易有限公司许可,擅自商用是侵权行为。如果您想购买此专利、获得商业授权和技术合作,请联系【客服】
本文链接:http://www.vipzhuanli.com/pat/books/201611009797.7/2.html,转载请声明来源钻瓜专利网。
- 上一篇:多媒体教室远程控制系统
- 下一篇:一种手术室设备远程控制方法