[发明专利]一种征信平台信用数据风险监控方法

说明书

本发明公开了一种征信平台信用数据风险监控方法，具体实现步骤如下：S1、配置预警数据模板，主要包含需要预警的数据类目，将需要预警的信息进行整理归纳，制作成可配置的模板；S2、将来源数据中需要预警的数据进行细化拆分存储，存储方式为按时间戳分库、分表方式，数据形式为key‑value形式。本发明对比传统通过大而全的数据比对发掘有用的预警信息，本发明采用采用更细粒度更有针对性的对不同预警数据采用分布式计算，在提高预警信息的准确性和时效性的同时，有效的解决数据库集中读写造成服务器资源浪费、数据库性能下降等问题，也大大降低了算法实现的耦合度降低了实施维护的成本。

技术领域

本发明涉及计算机信息处理技术领域，尤其涉及一种征信平台信用数据风险监控方法。

背景技术

征信就是专业化的、独立的第三方机构为个人或企业建立信用档案，依法采集、客观记录其信用信息，并依法对外提供信用信息服务的一种活动，它为专业化的授信机构提供了信用信息共享的平台。

征信数据监控的传统方法是将各种来源的数据统一转换到同一个数据库中，将不同类型的数据归类到不同的数据表中以数据行为单位存储，然后后对数据轮询比对发现和历史数据不同后整理出预警数据。

由于数据来源众多，有的是通过特定接口直接推送，有的是通过文件手动上传。更新方式不一样，有的是全量更新，有的是部分增量更新。更新时间不一样，有的是按年更新、有的数据按月度更新。随着时间推移，会造成数据库频繁的读写，大量消耗服务资源，严重影响预警数据的时效性和有效性。由于数据来源众多，更新时间也不统一，造成程序实现非常的复杂，不利于灵活定制扩展关注需要预警的数据，所以需要进行改进。

发明内容

本发明的目的是为了解决现有技术中因数据来源众多且更新方式、更新时间的不同，导致数据库频繁的读写，大量消耗服务资源，严重影响预警数据的时效性和有效性，同时还造成程序实现非常的复杂，不利于灵活定制扩展关注需要预警的数据的不足，而提出的一种征信平台信用数据风险监控方法。

为了实现上述目的，本发明采用了如下技术方案：

一种征信平台信用数据风险监控方法，具体实现步骤如下：

S1、配置预警数据模板，主要包含需要预警的数据类目，将需要预警的信息进行整理归纳，制作成可配置的模板；

S2、将来源数据中需要预警的数据进行细化拆分存储，存储方式为按时间戳分库、分表方式，数据形式为key-value形式；

S3、通过优先级计算类目综合计算等得出预警模板中的数据的优先级，优先级高的数据可分配较多线程等资源来快速处理数据，优化服务器资源的合理使用；

S4、根据数据比对的优先级再次制作热点数据模板，数据模板包含数据内容、时间戳、数据来源以及上次比对出现数据内容差异的时间戳、是否新增、是否变更标志，同时数据内容取hash后的签名，签名数据格式直接使用二进制数据格式，通过数据签名、时间戳、来源来确保数据比对的有效性和完整性；

S5、将历史数据按照按照热点数据模板保存到内存中，定时将来源数据和内存中的数据做两次比较，将重点需要预警的数据保存到指定媒介中，合理的使用内存可大大降低服务器硬盘的读写提高数据相应速度，二进制签名可大大降低数据对比的内容大小，降低cpu的使用率；

S6、继续将预警数据模板中剩余非热点数据拼接为一个字符串并计算得出hash值，与新增的数据做同样处理后比较hash签名是否相等来得出数据是否出现变动，如果出现变动则进一部按照时间戳比较数据内容；

S7、定期调整热点数据模板，优化数据对比算法，保留数据对比日志；

S8、将S5、S6处理后的数据按照预警模板生成方便阅读格式的预警信息。

优选地，所述S1中的数据类目包含：