[发明专利]一种流量数据的可视化展示系统、方法、介质和电子设备

说明书

本发明提供了一种流量数据的可视化展示系统、方法、介质和电子设备，该系统包括：流量数据收集单元，用于从流量缓存中间件的缓存队列中消费第一流量数据，将第一流量数据转换为符合预设数据格式类型的第二流量数据，并将第二流量数据批量插入时序数据库中；流量统计服务单元，用于根据检索请求接入至对应的第二流量数据的统计接口，并根据检索请求从时序数据库中调取对应类型的第二流量数据，并对调取的第二流量数据进行统计，得到统计结果；可视化展示单元，用于对统计结果进行可视化展示。本公开通过引入可视化展示单元，对流量统计服务单元的统计结果进行可视化展示，可以更加直观地看到统计结果，提高了用户体验度。

技术领域

本发明涉及计算机技术领域，具体而言，涉及一种流量数据的可视化展示系统、方法、介质和电子设备。

背景技术

工控系统面临着日益严峻的安全风险，工控安全已经提升到国家战略层面，如果可以对网络流量大数据进行有效的分析和存储，并对流量数据进行统计计算，进而利用可视化技术对流量数据进行展现，对整个工控网络设计优化、网络威胁的实时监测、以及安全事件的定位追溯都具有重要意义。

传统的基于关系型数据库的schema设计往往基于确定的数据结构(属性列)，无法满足针对灵活的不可以预知属性的动态扩展存储，同时也无法满足对大数据集的复杂逻辑的聚合查询功能；目前比较流行的NOSQL数据库，如Redis，MongoDB等无法满足面对大数据集的聚合分析功能。

由于网络流量数据量大、且统计方式与展现方式多样灵活等特征，因此，给流量数据的存储结构设计、统计检索性能、以及灵活易用的界面展现带来了挑战。因此，在长期的研发当中，发明人对流量展示方法进行了大量的研究，提出了一种流量展示方法，以解决上述技术问题之一。

发明内容

本发明的目的在于提供一种流量数据的可视化展示系统、方法、介质和电子设备，能够解决上述提到的至少一个技术问题。具体方案如下：

根据本发明的具体实施方式，第一方面，本公开提供一种流量数据的可视化展示系统，包括：

流量缓存中间件，用于通过多个流量引擎收集流量数据，并将收集到的流量数据缓存至本地磁盘；

流量数据收集单元，用于从所述流量缓存中间件的缓存队列中消费第一流量数据，将所述第一流量数据转换为符合预设数据格式类型的第二流量数据，并将所述第二流量数据批量插入所述时序数据库中；

所述时序数据库，用于存储和管理所述流量数据收集单元转换得到的所述第二流量数据；

流量统计服务单元，用于根据检索请求接入至对应的所述时序数据库存储的第二流量数据的统计接口，并根据所述检索请求从所述时序数据库中调取对应类型的第二流量数据，并对调取的所述第二流量数据进行统计，得到统计结果；

可视化展示单元，用于对所述统计结果进行可视化展示。

可选的，所述系统还包括：

获取单元，用于获取所述第二流量数据的格式类型信息；

其中，所述获取单元获取到的所述第二流量数据的所述数据格式类型信息至少包括：

属性名信息、类型信息、字段类型信息和对应的描述信息。

可选的，可视化展示单元还用于：

可视化展示所述第二流量数据的各项数据格式类型信息。

可选的，通过所述可视化展示单元对所述第二流量数据的各项数据格式类型信息以地图展示的方式进行可视化展示。

可选的，通过所述可视化展示单元对所述第二流量数据的各项数据格式类型信息以表格展示的方式进行可视化展示。