[发明专利]一种基于大数据的网络状态实时监控警报系统

说明书

本发明涉及一种基于大数据的网络状态实时监控警报系统，所述系统包括：节点组件、节点状态监控组件、网络探测组件、第三方数据组件、日志群集组件。本发明通过对监控节点实时追踪，一旦节点本身存在问题，无响应或者网络质量变差，将快速剔除该节点，并用备用节点替代，有效避免因故障导致监控误判和数据丢失；通过对自有监控节点、多家CDN厂商节点、第三方监控平台节点来源网络数据实时收集和整合，同时基于大数据智能分析，避免单一厂商自身网络故障导致误报，有效提高预警准确率。

【技术领域】

本发明属于网络数据处理领域，尤其涉及一种基于大数据的网络状态实时监控警报系统。

【背景技术】

互联网已经逐渐成为我们日常生活的一部分，我们每天需要使用各种APP，通过互联网与家人进行聊天、观看在线视频、玩电子游戏，如果网络线路不稳定，会严重影响各种APP使用体验。因此互联网商家、第三方监控平台纷纷推出网络质量监控工具，这些工具实时收集全国各地骨干网状态信息，在网络出现波动时进行故障展示、故障警报，网络工程师第一时间收到警报并进行高效率的网络故障处理、恢复，对互联网生态健康发展有极大促进作用。通过分析，我们发现现有网络质量监控技术存在以下明显问题：网络状态数据源单一，可能因厂商本身网络问题导致误报或者报障不全面。有问题、失效的监控节点更新不及时，导致该节点负责的监控区域的网络状态数据收集失败。本发明通过对监控节点实时追踪，一旦节点本身存在问题，无响应或者网络质量变差，将快速剔除该节点，并用备用节点替代，有效避免因故障故障导致监控误判和数据丢失；通过对自有监控节点、多家CDN厂商节点、第三方监控平台节点(爬虫抓取)等来源网络数据实时收集和整合，同时基于大数据智能分析，避免单一厂商自身网络故障导致误报，有效提高预警准确率。

【发明内容】

为了解决现有技术中的上述问题，本发明提出了一种基于大数据的网络状态实时监控警报系统，所述系统包含：节点组件、节点状态监控组件、网络探测组件、第三方数据组件、日志群集组件；

节点组件为网络上的数据接收和发送节点；

节点状态监控组件用于对一个或者多个节点组件及其备用节点进行监控和维护；

网络探测组件用于向节点组件发出网络探测包，接收反馈数据，并把反馈数据传到日志群集组件；

第三方数据组件用于从第三方平台抓取网络数据，并向网络探测组件提供数据；

日志群集组件用于接收网络探测组件的反馈数据，并基于所述反馈数据进行智能数据分析。

进一步的，节点状态监控组件维护备用节点，同时监控节点组件的响应状态，如果节点组件无响应或者响应质量差，将用备用节点替换。

进一步的，所述监控节点组件的响应状态，具体为：所述监控节点定期的给节点组件发送轻数据包，并接收来自节点组件的响应；所述轻数据包为不包含数据内容而只包含数据包类型的数据包。

进一步的，所述节点状态监控组件中保存节点组件及其备用节点之间的对应关系表；每个节点组件对应一个或多个备用节点；对应的多个备用节点按照优先级从大到小排列；在进行备用节点替换时，获取备用节点的优先级，选择优先级最大的备用节点进行替换。

进一步的，所述获取备用节点的优先级，具体为：获取待替换的节点组件的所有直接通信节点集合{Ni}；获取备用节点到所述每个直接通信节点的通信时间Ti；Ti为备用节点到第i个直接通信节点的通信时间；基于所述通信时间计算优先级，使得通信时间越短的备用节点的备用优先级越高。