[发明专利]一种基于大数据的网管数据互联系统

权利要求书

1.一种基于大数据的网管数据互联系统，其特征在于，包括：

南向数据接入层：用于接入各种实时性的网络数据和非实时性的网络数据；

数据关联中心：用于对南向数据接入层接入的数据进行数据建模和模型输出，包括资源的Oracle数据挖掘和多数据源关联；

数据仓库：进行共享数据的统一存储；

北向共享接口层：为分布式接口服务层，进行数据对外开放共享；

管控分析接口：对互联系统进行可视化管理和控制。

2.如权利要求1所述的基于大数据的网管数据互联系统，其特征在于，所述南向数据接入层对实时性要求高的网络数据通过Kafka方式接入，对实时性无要求的网络数据通过Flume方式接入。

3.如权利要求1所述的基于大数据的网管数据互联系统，其特征在于，所述网络数据包括工单、网络变更、网络资源、网管性能、告警、拔测、用户投诉和其他网络数据。

4.如权利要求1所述的基于大数据的网管数据互联系统，其特征在于，所述资源的Oracle数据挖掘过程如下：加载资源数据后，采用Spark Streaming对南向接入的数据源以实时流的方式进行资源维度信息规范化处理，并回填资源信息，给多数据源关联提供统一标准的资源维度。

5.如权利要求4所述的基于大数据的网管数据互联系统，其特征在于，所述多数据源关联，对资源的Oracle数据挖掘后输出的各种数据源以资源维度为索引进行数据关联和汇聚，包括同最小维度关联、同网络类型关联、同数据量级关联和全字段关联。

6.如权利要求1所述的基于大数据的网管数据互联系统，其特征在于，所述数据关联中心对资源信息的处理方式分为实时计算框架和离线计算框架，所述实时计算框架为SparkSteaming，用于接入流式消息数据，并从消息队列Kafka获取消息；所述离线计算框架为Spark和HIVE，用于接入文件数据，并从HDFS获取输入数据。

7.如权利要求1所述的基于大数据的网管数据互联系统，其特征在于，所述数据仓库存储的数据包括原始接入数据和关联后的融合模型数据，所述原始接入数据是指资源Oracle数据挖掘后的原始接入数据，原始接入数据存储在HBASE集群，关联后的融合模型数据存储在HIVE。

8.如权利要求1所述的基于大数据的网管数据互联系统，其特征在于，所述北向共享接口层采用如下方式对外开放数据共享：实时获取HBASE数据、异步获取HBASE数据、异步获取即系查询数据、FTP定期获取数据或获取Kafka实时数据。

9.如权利要求1所述的基于大数据的网管数据互联系统，其特征在于，所述管控分析接口包括元数据管理、数据质量、接口管理、安全管理和用户权限管理。