[发明专利]基于业务场景的实时业务监控方法、系统、终端及介质

说明书

本发明提供了一种基于业务场景的实时业务监控方法及系统，包括业务应用日志埋点；埋点数据实时采集；实时复杂事件处理；输出超时告警消息。在业务应用日志埋点进行数据监控，根据业务单发起初始化状态到处理中状态再到业务单完成终态的状态变化过程，配置超时时间，对于总耗时超过超时时间的业务单进行实时监控。其中，采用Redis Lua脚本对每一项业务单的状态变化日志进行预排序，并通过Flink CEP模型对每一项预排序后的业务单进行超时模式匹配，得到业务异常事件。本发明既可以很好的贴合业务场景，对每一笔业务单进行监控并及时发现超时异常的业务单，可以扩展到任何具有不同状态先后顺序变化的业务场景。

技术领域

本发明涉及业务监控技术领域，具体地，涉及一种基于业务场景的实时业务监控方法、系统、终端及介质。

背景技术

在支付业务中，支付请求并发量大，越来越高的支付业务并发量，复杂的业务处理逻辑，需要对每一笔支付单做完整链路的实时监控，并及时发现超时处理的业务支付单；应用系统对接的渠道、商户等各种第三方网络接口比较多，容易发生由于网络、渠道或商户系统维护、甚至突发的不可预期的异常，导致业务处理出现超时的情况，需要及时监控到并发出告警。传统的解决方法是采用不停地轮询扫描业务系统的关系数据库，通过SQL查询状态为“处理中”的业务支付单，并计算对应的超时时间，将超时时间超过一定阈值的业务支付单信息发送给告警平台。传统的关系数据库SQL查询方式，对数据库本身的要求较高，也难以应对分库分表以及不同业务分类的处理，应对大规模的并发处理性能和效率低下。

因此，传统方法存在比较大的问题：

1、对大规模数据的联机交易数据库表做轮询SQL查询，对关系数据库造成了巨大压力，影响正常联机业务；

2、不同类型业务阈值不一样带来的灵活扩展问题；

3、效率和性能较低，无法应对大规模的并发量。

经过检索发现：

申请号为201610921493.1的中国发明专利申请《一种业务监控的方法及系统》，包括：从业务系统中提取业务日志，并根据所述业务日志打印业务日志，所述打印业务日志的过程包括：将从业务系统中提取业务日志依据业务指标进行存储；采集所打印的业务日志，并将所述业务日志推送至分布式发布订阅消息系统；根据所述业务系统的业务指标，通过所述分布式发布订阅消息系统提取业务日志，并进行聚合计算；根据经过聚合计算后的业务日志，扫描得到发生异常的业务指标。该专利技术虽然公开了通过获取“业务日志”、“分布式发布订阅消息系统(Kafka)”等信息进行异常监控的相关内容，但是该专利技术中文件是打印日志，分布式发布订阅消息系统提取业务日志，并进行聚合计算扫描得到异常业务指标；但是将这种方式应用于支付业务中，仍然存在如下问题：

1、该专利需要对提取的业务日志进行聚合计算得到业务指标；

2、该专利是针对业务指标进行扫描得到发生异常的业务指标，监控粒度比较粗。

申请号为201410528628.9的中国发明专利申请《一种对异常数据进行处理的方法、装置及监控系统》，涉及了一种对异常数据进行处理的方法，该方法通过“超时”来判断数据异常，但是该专利技术中所采用的通过“超时”来判断数据异常的方法，但是将这种方式应用于支付业务中，仍然存在如下问题：

该专利是通过所发送的测试数据所记录的第一时间戳与第二时间戳的差值作为超时时间，不涉及数据本身的业务含义，即支付业务自身的事件状态。

申请号为201811373337.1的中国发明专利申请《一种基于Flink的数据流多向处理系统》，记载了利用Kafka的高扩展性和高可靠性，可将多个数据源的数据准确地收集汇总，与Flink的高效组合。但是将这种方式应用于支付业务中，仍然存在如下问题：