[发明专利]一种大数据评分系统稳定性监控方法有效
申请号: | 202110489346.2 | 申请日: | 2020-07-02 |
公开(公告)号: | CN113190426B | 公开(公告)日: | 2023-10-20 |
发明(设计)人: | 陈建;苏明富;王树伦 | 申请(专利权)人: | 北京睿知图远科技有限公司 |
主分类号: | G06F11/34 | 分类号: | G06F11/34;G06F11/30 |
代理公司: | 北京冠和权律师事务所 11399 | 代理人: | 朱健 |
地址: | 100000 北京市密云区鼓楼东大街3号山水*** | 国省代码: | 北京;11 |
权利要求书: | 查看更多 | 说明书: | 查看更多 |
摘要: | |||
搜索关键词: | 一种 数据 评分 系统 稳定性 监控 方法 | ||
本发明提供了一种大数据评分系统稳定性监控方法,包括:采集大数据评分系统的评分日志;将采集的评分日志通过预设消息队列进行解耦传输到监控中心;监控中心对接收到的评分日志进行预处理和预转化;将预处理和预转化后的评分日志导入查询数据库,同时,监控中心通过轮循查询数据的方式对导入后的查询数据库进行监控。便于降低存储成本,提高查询速度,进而提高监控效率。
技术领域
本发明涉及监控技术领域,特别涉及一种大数据评分系统稳定性监控方法。
背景技术
大数据评分系统较常采用的一种智能评分方式,并且为了保证大数据评分系统运行的可靠性,一般会对大数据评分系统进行监控,但是对其进行监控的过程中一般存在如下问题:
1、在监控过程中,会对监控数据和指标的存储,业界通常做法是对原始数据进行存储,长此以往会产生大量数据,占用海量存储空间,造成存储成本居高不下。
2、随着时间的推移监控的历史数据本身价值已经微乎其微,通常会对历史数据定期清理,这样做也会增加IT的维护成本。
3、对监控指标按照时间维度进行计算后压缩存储,如果计算的时间维度发生变化无法进行重新计算,易用性也会受到影响。
4、当存在数值类型的敏感数据时无法明文存储,如果该敏感值有统计分析类的需求则需要进行批量解密后才可进行统计。
基于上述存在的问题,使得存储成本高、查询速度慢,进而降低监控效率。
因此,本发明提出一种大数据评分系统稳定性监控方法。
发明内容
本发明提供一种大数据评分系统稳定性监控方法,用以解决上述提出的技术问题。
本发明提供一种大数据评分系统稳定性监控方法,包括:
采集大数据评分系统的评分日志;
将采集的评分日志通过预设消息队列进行解耦传输到监控中心;
所述监控中心对接收到的评分日志进行预处理和预转化;
将预处理和预转化后的评分日志导入查询数据库,同时,所述监控中心通过轮循查询数据的方式对导入后的查询数据库进行监控。
在一种可能实现的方式中,
所述监控中心通过轮循查询数据的方式对导入后的查询数据库进行监控之前,包括:
查询与所述监控中心监控获得的监控样本相关的样本数据指标;
获取所述样本数据指标的指标结果,基于所述指标结果判断所述样本数据指标是否异常;
若异常,基于所述监控中心,向预先配置好的目标员工的警示端发送第一警示指令,所述警示端执行与第一警示指令相关的第一警示提醒;
否则,基于所述样本数据指标,提取监控指标。
在一种可能实现的方式中,
采集大数据评分系统的评分日志的过程中包括:
基于时间戳,实时监测所述大数据评分系统产生的评分日志;
对所述评分日志的数据容量进行判断,当所述数据容量到达预设容量范围时,将对应的评分日志存储传输到监控中心;
当所述数据容量小于预设容量范围对应的最小容量时,基于所述时间戳,继续实时监测所述大数据评分系统产生的评分日志;
当所述数据容量大于预设容量范围对应的最大容量时,判定传输失败,并向预先配置好的目标员工的警示端发送第二警示指令,所述警示端执行与第二警示指令相关的第二警示提醒。
在一种可能实现的方式中,
该专利技术资料仅供研究查看技术是否侵权等信息,商用须获得专利权人授权。该专利全部权利属于北京睿知图远科技有限公司,未经北京睿知图远科技有限公司许可,擅自商用是侵权行为。如果您想购买此专利、获得商业授权和技术合作,请联系【客服】
本文链接:http://www.vipzhuanli.com/pat/books/202110489346.2/2.html,转载请声明来源钻瓜专利网。
- 数据显示系统、数据中继设备、数据中继方法、数据系统、接收设备和数据读取方法
- 数据记录方法、数据记录装置、数据记录媒体、数据重播方法和数据重播装置
- 数据发送方法、数据发送系统、数据发送装置以及数据结构
- 数据显示系统、数据中继设备、数据中继方法及数据系统
- 数据嵌入装置、数据嵌入方法、数据提取装置及数据提取方法
- 数据管理装置、数据编辑装置、数据阅览装置、数据管理方法、数据编辑方法以及数据阅览方法
- 数据发送和数据接收设备、数据发送和数据接收方法
- 数据发送装置、数据接收装置、数据收发系统、数据发送方法、数据接收方法和数据收发方法
- 数据发送方法、数据再现方法、数据发送装置及数据再现装置
- 数据发送方法、数据再现方法、数据发送装置及数据再现装置