[发明专利]数据实时监控的方法、装置及系统

说明书

技术领域

本发明涉及数据监控技术领域，尤其涉及一种数据实时监控的方法、装置及系统。

背景技术

当前，随着人们对数据业务精细化运营的要求越来越高，数据实时监控技术得到了广泛的应用。数据实时监控是指利用软件对系统运行的过程及相应的数据进行实时同步的监控，例如：杀毒软件对计算机内存进行监控。

现有技术的数据实时监控的系统包括数据提取、转换、装载(Extraction-Transformation-Loading，简称ETL)设备，数据库设备及数据展现系统。

现有技术的数据实时监控的方法是由所述ETL设备对外来的数据(例如由深度数据包检测设备(Deep Packet Inspection，简称DPI)进行汇总处理后的数据)进行定时获取、并进行汇总处理，然后定时向数据库设备(例如关系数据库或内存数据库)发送所述ETL设备汇总处理后的数据，数据库设备对所述ETL设备汇总处理后的数据进行存储，最后由所述数据展现系统(例如报表系统或仪表盘系统等)使用定时任务的方式，定时从所述数据库设备的数据表中获取数据，对获取的数据进行过滤和汇总，并以图或表的形式向用户进行展现。

在实现本发明实施例的过程中，发明人发现现有技术中至少存在如下问题：由于现有技术的ETL设备及数据展现系统都采用定时任务式的处理方式，一旦ETL设备处理性能跟不上，将导致数据发送存在延迟，则数据库设备的数据表中将没有记录某段时间内的数据，使得数据展现系统展现出现异常，例如报表展现出现锯齿状。

发明内容

本发明的实施例提供一种数据实时监控的方法、装置及系统，以实现数据的延迟展现在秒级范围内，一定程度上解决了现有技术中由于数据发送存在延迟，造成数据的展现存在异常的问题。

为达到上述目的，本发明的实施例采用如下技术方案：

一种数据实时监控的方法，包括：

接收数据提取、转换、装载ETL设备推送过来的业务数据包，所述业务数据包包括业务数据及所述业务数据的业务类型；

根据所述业务数据的业务类型以及获得的发送策略，将所述业务数据向数据展现系统推送，以使得所述数据展现系统基于数据触发模式，在接收到所述业务数据后实时展现与所述业务数据对应的图表。

一种集成装置，包括：

接收单元，用于接收数据提取、转换、装载ETL设备推送过来的业务数据包，所述业务数据包包括业务数据及所述业务数据的业务类型；

推送单元，用于根据所述业务数据的业务类型以及获得的发送策略，将所述业务数据向数据展现系统推送，以使得所述数据展现系统基于数据触发模式，在接收到所述业务数据后实时展现与所述业务数据对应的图表。

一种数据实时监控的系统，包括数据提取、转换、装载ETL设备、集成装置和数据展现系统，

所述数据提取、转换、装载ETL设备，用于在接收到业务数据包时，将所述业务数据包向所述集成装置推送，所述业务数据包包括业务数据及所述业务数据的业务类型；

所述集成装置，用于根据所述业务数据的业务类型以及获得的发送策略，将所述业务数据向数据展现系统推送；

所述数据展现系统，用于基于数据触发模式，在接收到所述业务数据后实时展现与所述业务数据对应的图表。

本发明实施例提供的数据实时监控的方法、装置及系统，由于通过接收所述ETL设备推送过来的业务数据包，并根据所述业务数据的业务类型以及获得的发送策略，将所述业务数据向数据展现系统推送，以使得所述数据展现系统基于数据触发模式，在接收到所述业务数据后实时展现与所述业务数据对应的图表。这样使得所述数据展现系统实时展现与所述业务数据对应的图表，避免了现有技术中一旦数据展现系统在当前周期定时任务触发时从数据库设备中没有获取到ETL设备延迟发送的数据，则需要等到下一个周期定时任务触发时才能获取到的情况，从而能实现数据的延迟展现在秒级范围内，一定程度上解决了现有技术中由于数据发送存在较大延迟，造成数据的展现存在异常的问题。

附图说明

为了更清楚地说明本发明实施例或现有技术中的技术方案，下面将对实施例或现有技术描述中所需要使用的附图作简单地介绍，显而易见地，下面描述中的附图仅仅是本发明的一些实施例，对于本领域普通技术人员来讲，在不付出创造性劳动性的前提下，还可以根据这些附图获得其他的附图。

图1为本发明实施例提供的数据实时监控的方法的流程图；

图2为本发明又一实施例提供的数据实时监控的方法的流程图；