[发明专利]一种网络数据的分析方法及装置

说明书

本发明的实施例提供一种网络数据的分析方法及装置，涉及数据处理领域，能够对多种数据进行关联分析，处理实时的流式数据。该方法包括：获取数据采集节点根据SNMP数据采集需求采集的SNMP数据；获取目标通信设备的netflow日志、用户的DNS日志、用户的AAA日志；根据目标通信设备的目标接口索引在目标SNMP数据中查找目标接口；根据目的IP在DNS日志中查找并获取目标用户的目标用户请求域名，根据目标用户请求域名确定目标应用；根据源IP在DNS日志中查找并获取目标用户的IP，并根据目标用户的IP在AAA日志中查找并获取目标用户账号；确定目标用户通过目标通信设备的目标接口在目标应用上使用目标用户账号时产生了流量。本申请实施例应用于处理网络数据。

技术领域

本发明的实施例涉及数据处理领域，尤其涉及一种网络数据的分析方法及装置。

背景技术

现有网络数据采集分析系统主要为网络协议(internet protocol，IP)网网管系统，网管系统主要由资源管理、性能管理、告警管理、配置管理四方面组成，经过几十年的发展，逐渐形成了一整套成熟的管理模型以及管理软件。另一方面，也有很多厂商发布了自己的网管系统，例如，思科全数字化网络架构(cisco digital network architecture，CISCODNA)，华为的iManager U2000，华三的智能管理中心(intelligent management center，iMC)等，这些软件基本解决了IP数据采集的问题。

在实际应用过程中，由于底层实现的原因，现有的网络数据采集分析系统会限制采集服务器操作系统版本、服务器型号等，且无法横向扩展，由于使用关系型数据库，数据实时处理性能有限，当数据量过大时可能会出现系统无响应的情况，并且不支持流式数据的实时处理；由于不能进行跨节点部署采集，跨省报表或者总体报表难以集中化处理；另外，由于网元设备的快速增加，网络拓扑的复杂度不断提高，互联网业务多样化快速发展，运营商仅通过简单网络管理协议(simple network management protocol，SNMP)对网络进行管理无法满足业务支撑需要，而现有网络数据采集分析系统扩展性有限，多系统大数据分析功能不足，关联分析能力较弱。

发明内容

本发明的实施例提供一种网络数据的分析方法及装置，能够对多种数据进行关联分析，处理实时的流式数据。

第一方面，提供一种网络数据的分析方法，包括如下步骤：获取数据采集节点根据简单网络管理协议SNMP数据采集需求采集的SNMP数据，其中，SNMP数据包括通信设备的IP、通信设备的接口索引；获取目标通信设备的netflow日志、用户的域名解析系统DNS日志、用户的网络安全系统AAA日志，其中，netflow日志包括目标通信设备的IP、目标通信设备的目标接口索引、目标接口索引对应的源IP、目标接口索引对应的目的IP，DNS日志包括用户的IP、用户请求域名，AAA日志包括用户账号、用户的IP；根据目标通信设备的IP在SNMP数据中查找并获取目标通信设备的目标SNMP数据；根据目标通信设备的目标接口索引在目标SNMP数据中查找目标接口，并获取目标接口信息，其中，目标接口信息包括接口名称、接口类型、接口描述、接口位置；根据目标接口索引对应的目的IP在DNS日志中查找并获取目标用户的目标用户请求域名，根据目标用户请求域名确定目标应用；根据目标接口索引对应的源IP在DNS日志中查找并获取目标用户的IP，并根据目标用户的IP在AAA日志中查找并获取目标用户账号；确定目标用户通过目标通信设备的目标接口在目标应用上使用目标用户账号时产生了流量。