[发明专利]一种比对实时流数据的装置和方法

说明书

本发明以及大数据处理领域，尤其涉及一种比对实时流数据的装置和方法。所述装置包括：流数据输入接口，用于读取流数据；用户基础关键字输入接口，用于输入用户基础关键字；AI知识库接入接口，用于向AI知识库输入用户基础关键字，并接收AI知识库推荐设置的比对关键字；比对单元，用于比对所述流数据和所述比对关键字并输出比对结果；和预警比对输出接口，用于对外输出所述比对结果。本发明的装置可以极大地减少重复编码甚至达到零编码，降低开发成本；可以无缝的嵌套在各个业务治理系统中，实现实时快速比对，快速响应客户实时动态变化的需求，极大提高了实时数据使用的质量。

技术领域

本发明涉及大数据处理领域，尤其涉及一种比对实时流数据的装置和方法。

背景技术

随着社会的高速发展，各行业数字化进程的推动，大数据精确比对预警推送就显得尤为重要，每天面对庞杂的业务数据，怎么从这些数据中找到我们想要的数据，这对每个行业来说都极其重要。

在各行业中一般都有一套甚至多套标准化数据治理流程。对于传统软件行业开发的预警比对功能，面对各类多源异构数据，通常都是只能比对某一特定的数据源，或者只能比对单个关键字，如果有不同的数据源以及不同的比对内容就需要重新写代码，重新部署上线，十分繁琐且不能及时响应客户动态需求。

发明内容

有鉴于现有技术的上述缺陷，本发明的目的是提供一种比对实时流数据的装置和方法，通过嵌入该装置和方法能很好的避免上述重复开发流程，极大缩小开发成本和人力投入，可以实践一套装置完成各类业务数据比对预警并推送到各类应用平台的功能，可实现实时设置并完成快速预警比对的需求，在系统业务以及功能层面快速实现零编码完成各类不同关键业务功能的数据预警比对推送功能。

为实现上述目的，本发明提供了一种比对实时流数据的装置，包括：

流数据输入接口，用于读取流数据；

用户基础关键字输入接口，用于输入用户基础关键字；

AI知识库接入接口，用于向AI知识库输入用户基础关键字，并接收AI知识库推荐设置的比对关键字；

比对单元，用于比对所述流数据和所述比对关键字并输出比对结果；

和预警比对输出接口，用于对外输出所述比对结果。

进一步的，所述比对单元的比对维度包括：比对关键字、目标组件类型和地址。

进一步的，所述比对单元的比对维度还包括：数据来源、资源表名、字段名、预警起止时间、使用资源线程数、预警数据阀值。

进一步的，所述预警比对输出接口连接的外部设备为日志系统。

进一步的，所述用户基础关键字输入接口为窗体。

本发明提供了一种比对实时流数据的方法，应用于本发明第一方面的比对实时流数据的装置，包括：

步骤S1、分析各业务系统数据解析入库流程，找到数据处理中间流程代码或装置嵌入本发明的比对实时流数据的装置的代码；

步骤S2、设置基础比对资源和比对结果集合；

步骤S3、输入用户基础关键字，并将用户基础关键字转发给AI知识库；

步骤S4、接收AI知识库根据用户基础关键字推荐的比对关键字；

步骤S5、获取业务系统的流数据，比对所述流数据和所述比对关键字，输出比对结果。

本发明实现了如下技术效果：

(1)本发明的装置提供了一个灵活性高且低耦合的AI智能动态配置比对模板装置，可以极大地减少重复编码甚至达到零编码，降低开发成本。