[发明专利]一种自适应的CDN业务分析监控系统

说明书

技术领域

本发明涉及互联网技术领域，尤其是涉及一种自适应的CDN业务分析监控系统。

背景技术

随着社会的发展，互联网用户快速增长带动了互联网经济的蓬勃发展，移动互联网、电子商务、网络视频、品牌网络广告、网上招聘、网络游戏等在极短的时间得到快速发展并积累了众多用户，成为了人们生活中不可或缺的一部分。

在现有CDN技术中，需要实时监控CDN业务的各项基础数据，包括带宽、状态码、请求数、下载速度、分省份运营商详情等，这样才能及时分析影响CDN服务质量的原因，包括各机房的网络服务质量、CDN配置异常、上线程序bug等因素，并因此作为CDN运维及调度的依据。在这个过程中，建设一套监控分析系统对上述数据进行采集和分析是解决上述问题的关键。目前传统的监控方式是采用简单阀值的方法，其方式是通过预先设置相关的阀值，并通过是否触发阀值来判断是否网络服务的质量是否出现异常；同时根据业务的变化对阀值进行适当的调整。传统的方法在实际过程中存在着一些弊端，主要包括如下几个方面：

1.阀值的设置主要依靠历史数据和经验进行判断。

(1)历史数据可作为设置阀值的参考，但在实际环境中，业务是经常变化的，存在很多不确定性，因此如何及时、准确地挖掘历史数据是设置阀值的关键因素。而传统方法采用人工的方式进行挖掘和分析，在时效性和准确性上将受到很大的影响。

(2)此外运维人员因工作经历、技术能力、教育背景等问题，其经验也不尽相同，因此根据经验进行阀值的设置受个人主观因素的影响非常大。

2.工作量巨大。由于CDN业务众多(包括页面加速、下载加速、点播加速、直播加速等业务)，因此在设置阀值时会遇到需要设置的阀值多，设置业务量大等问题。

3.灵活度不够。业务是随时变化的，对于网络质量的要求也是随之发生变化，因此需要运维人员根据业务的需要不断地进行阀值的调整，而且调整的过程完全是人工的。因此传统的模式在灵活度上存在着很大的缺陷。

滞后性。运维人员接收到报警之后需要进行各类关联分析，包括是否是机房问题、源站问题、或者是骨干网问题等。整个分析过程耗时较长，如果未设置合理的收敛规则，甚至会出现报警轰炸的情况，就有可能影响到几乎所有业务的正常运行。

发明内容

本发明的目的在于提供一种自适应的CDN业务分析监控系统，以解决上述背景技术中提出的问题和缺陷,形成一个从挖掘规则阀值到数据分析、再到生成结论标记、最终将结论标记用于规则阀值池中的处理闭环。

为实现上述目的，本发明提供如下技术方案：

一种自适应的CDN业务分析监控系统，设有一套策略机、一个聚合分析模块，形成一个从挖掘规则阀值到数据分析、再到生成结论标记、最终将结论标记用于规则阀值池中的处理闭环，其监控分析步骤如下：

Q1:由人工通过数据挖掘模块从历史业务数据中挖掘出各类规则阈值，进行人工标记，挖掘出来的规则阀值都被输入到策略机；

Q2:所有经过CDN的实时业务数据都由数据输入模块输入到策略机，策略机根据规则阀值对数据进行处理，判断业务数据是否满足规则阀值，处理完成以后由策略机输出带有标签的数据；

Q3:带有标签的实时数据从策略机输出以后，进入到聚合分析模块，聚合分析模块根据业务通常的逻辑关系，对带有标签的业务数据再次进行分析；

Q4：由人工根据业务的变化，对阈值进行相应的调整；

Q5：聚合分析模块对本轮分析结果进行汇总，并得出最终的结论标记，结论标记将会再返回到步骤1中，作为阈值的一部分再输入到策略机中，最终用于后续规则阈值的深挖掘，并由此形成一个正向反馈的循环。

作为上述技术方案的优选，Q1步骤中的规则阀值挖掘的周期根据需要自行定义，通常设置为一天挖掘一次。

作为上述技术方案的优选，Q2步骤中输出的每个标签具有特定的含义，标明业务数据是否满足规则阀值或标明带宽是突增还是突降。

作为上述技术方案的进一步说明，Q3步骤中的聚合分析模块对带有标签的业务数据再次进行分析，具体为，

当带宽数、请求数处于平稳状态，则意味着业务量相对平稳；

当发生带宽上涨、请求数增加的情况，则意味着业务量的增加；

当同区域多业务异常状态码突然激增，则意味着发生了区域性的网络问题。

本发明的优点：