[发明专利]模型监控方法、装置、计算机设备及存储介质有效
| 申请号: | 201910604966.9 | 申请日: | 2019-07-05 |
| 公开(公告)号: | CN110458713B | 公开(公告)日: | 2023-10-13 |
| 发明(设计)人: | 陈依云 | 申请(专利权)人: | 中国平安人寿保险股份有限公司 |
| 主分类号: | G06Q40/08 | 分类号: | G06Q40/08;G06Q30/0201 |
| 代理公司: | 深圳市精英专利事务所 44242 | 代理人: | 林燕云 |
| 地址: | 518000 广东省深圳市福田区益田路5033号*** | 国省代码: | 广东;44 |
| 权利要求书: | 查看更多 | 说明书: | 查看更多 |
| 摘要: | |||
| 搜索关键词: | 模型 监控 方法 装置 计算机 设备 存储 介质 | ||
1.一种模型监控方法,其特征在于,包括:
若检测到当前时间为第一预设时间,获取第一目标模型的第一当前数据指标、第一当前性能指标以及第一当前效果指标;
根据所述第一当前数据指标所处的预设区间判断所述第一目标模型是否出现异常;
将所述第一当前性能指标与前一次性能指标进行对比以判断所述第一目标模型是否出现异常;
将所述第一当前效果指标与前一次效果指标进行对比以判断所述第一目标模型是否出现异常;
若所述第一目标模型出现异常,根据发生异常的所述第一目标模型的编号生成异常消息邮件,并将所述异常消息邮件发送至预设邮件地址。
2.根据权利要求1所述的模型监控方法,其特征在于,所述根据所述第一当前数据指标所处的预设区间判断所述第一目标模型是否出现异常,包括:
判断所述第一当前数据指标处在预设区间的位置,其中,所述预设区间的位置包括:调整区、稳定区以及观察区;
若所述第一当前数据指标处在预设区间的调整区,判定所述第一目标模型发生异常。
3.根据权利要求1所述的模型监控方法,其特征在于,所述将所述第一当前性能指标与前一次性能指标进行对比以判断所述第一目标模型是否出现异常,包括:
获取所述第一目标模型的前一次性能指标并将所述前一次性能指标与所述第一当前性能指标进行对比;
若所述前一次性能指标与所述第一当前性能指标之间的差值超过预设性能指标阈值,判定所述第一目标模型发生异常。
4.根据权利要求1所述的模型监控方法,其特征在于,所述将所述第一当前效果指标与前一次效果指标进行对比以判断所述第一目标模型是否出现异常,包括:
获取所述第一目标模型的前一次效果指标并将所述前一次效果指标与所述第一当前效果指标进行对比;
若所述前一次效果指标与所述第一当前效果指标之间的差值超过预设效果指标阈值,判定所述第一目标模型发生异常。
5.根据权利要求1所述的模型监控方法,其特征在于,所述若所述第一目标模型出现异常,根据发生异常的所述第一目标模型的编号生成异常消息邮件,并将所述异常消息邮件发送至预设邮件地址之后,还包括:
若检测到当前时间为第二预设时间,获取第二目标模型的第二当前数据指标、第二当前性能指标以及第二当前效果指标;
根据所述第二当前数据指标判断所述第二目标模型是否出现异常;
根据所述第二当前性能指标判断所述第二目标模型是否出现异常;
根据所述第二当前效果指标判断所述第二目标模型是否出现异常;
若所述第二目标模型出现异常,根据发生异常的所述第二目标模型的编号生成异常消息邮件,并将所述异常消息邮件发送至预设邮件地址。
6.一种模型监控装置,其特征在于,包括:
第一获取单元,用于若检测到当前时间为第一预设时间,获取第一目标模型的第一当前数据指标、第一当前性能指标以及第一当前效果指标;
第一判断单元,用于根据所述第一当前数据指标所处的预设区间判断所述第一目标模型是否出现异常;
第二判断单元,用于将所述第一当前性能指标与前一次性能指标进行对比以判断所述第一目标模型是否出现异常;
第三判断单元,用于将所述第一当前效果指标与前一次效果指标进行对比以判断所述第一目标模型是否出现异常;
第一生成单元,用于若所述第一目标模型出现异常,根据发生异常的所述第一目标模型的编号生成异常消息邮件,并将所述异常消息邮件发送至预设邮件地址。
7.根据权利要求6所述的模型监控装置,其特征在于,所述第一判断单元包括:
第一判断子单元,用于判断所述第一当前数据指标处在预设区间的位置,其中,所述预设区间的位置包括:调整区、稳定区以及观察区;
第一判定子单元,用于若所述第一当前数据指标处在预设区间的调整区,判定所述第一目标模型发生异常。
该专利技术资料仅供研究查看技术是否侵权等信息,商用须获得专利权人授权。该专利全部权利属于中国平安人寿保险股份有限公司,未经中国平安人寿保险股份有限公司许可,擅自商用是侵权行为。如果您想购买此专利、获得商业授权和技术合作,请联系【客服】
本文链接:http://www.vipzhuanli.com/pat/books/201910604966.9/1.html,转载请声明来源钻瓜专利网。





