[发明专利]一种生成监控数据的系统及方法在审
| 申请号: | 202310220493.9 | 申请日: | 2023-03-08 |
| 公开(公告)号: | CN116346657A | 公开(公告)日: | 2023-06-27 |
| 发明(设计)人: | 雷杰;林位宁;蔡岳阳 | 申请(专利权)人: | 天翼云科技有限公司 |
| 主分类号: | H04L43/08 | 分类号: | H04L43/08;G06F9/445;G06F9/448;H04L43/0894;H04L43/0852;H04L43/0876;H04L43/50 |
| 代理公司: | 暂无信息 | 代理人: | 暂无信息 |
| 地址: | 100010 北京市东城区青*** | 国省代码: | 北京;11 |
| 权利要求书: | 查看更多 | 说明书: | 查看更多 |
| 摘要: | |||
| 搜索关键词: | 一种 生成 监控 数据 系统 方法 | ||
1.一种生成监控数据的系统,其特征在于,所述系统包括:
获取模块,所述获取模块用于从服务器中获取Nginx处理客户端请求时关联的请求状态数据;
处理模块,所述处理模块与所述获取模块被配置在同一台服务器内,所述处理模块通过本地接口与所述获取模块通讯,所述获取模块用于接收所述获取模块获取到的请求状态数据和定期抓取Nginx基本状态数据,以生成指标数据,所述指标数据被配置为能够以文本格式导出;
其中,请求状态数据包括Nginx处理客户端请求时关联的响应码、速率、延时和流量数据。
2.根据权利要求1所述的生成监控数据的系统,其特征在于,所述获取模块被配置为Monitor组件,所述Monitor组件基于nginx-lua-Module并采用lua编写。
3.根据权利要求1所述的生成监控数据的系统,其特征在于,所述处理模块被配置为Collector组件,所述Collector组件由Golang编写,所述指标数据为标准PrometheusMetrics指标数据。
4.根据权利要求3所述的生成监控数据的系统,其特征在于,所述处理模块用于将接收到的请求状态数据和Nginx基本状态数据反序列化成相应的Golang结构体对象。
5.根据权利要求4所述的生成监控数据的系统,其特征在于,所述Collector组件包括collector package、status package和main package;
其中,collector package包含自定义的prometheus collector组件,用于将Nginx状态数据转化为prometheus metrics;status package用于Nginx状态数据的收集、以及将请求状态数据和Nginx基本状态数据反序列化成相应的Golang结构体对象;main package用于socket监听和启动http服务。
6.根据权利要求1所述的生成监控数据的系统,其特征在于,所述指标数据以Http API接口方式以文本格式导出。
7.一种生成监控数据的方法,其特征在于,应用于权利要求1-6中任一项所述的生成监控数据的系统,所述方法包括:
数据采集:通过获取模块采集Nginx处理客户端请求时关联的请求状态数据,并通过处理模块定期抓取Nginx基本状态数据;
数据处理:根据监控需要,创建Prometheus Metrics指标,通过处理模块对数据采集步骤采集到的数据进行处理,以得到各指标数据的标签和指标值;
数据导出:以文本格式导出所有指标数据。
8.根据权利要求7所述的生成监控数据的方法,其特征在于,所述数据采集步骤具体为:
每次Nginx处理请求到达log执行阶段时,获取模块自动采集Nginx处理客户端请求时关联的请求状态数据并将其推送到暂存文件。
9.根据权利要求8所述的生成监控数据的方法,其特征在于,所述获取模块采集Nginx处理客户端请求时关联的请求状态数据具体为:
在Master进程启动后,通过init_by_lua*钩子完成获取模块的lua模块代码预加载,并将其保存在虚拟机中;
在Worker进程启动时,通过init_work_by_lua*执行钩子为每个Worker进程定义一个定时器,该定时器间隔一定时间回调一个flush函数;
所述处理模块在请求处理流程到达log执行阶段时,使用log_by_lua*执行钩子并调用log函数收集与本次请求关联的请求状态数据,所述请求状态数据table中的数据由flush函数进行消费。
10.根据权利要求7所述的生成监控数据的方法,其特征在于,所述数据处理具体为,
将收集到的请求状态数据和Nginx基本状态数据反序列化成相应的Golang结构体对象;
引入Prometheus的client_golang_sdk,根据监控需要创建Prometheus Metrics指标,然后对数据采集步骤生成的Golang结构体对象进行处理,得到各指标的Lable标签和Metrics指标值。
该专利技术资料仅供研究查看技术是否侵权等信息,商用须获得专利权人授权。该专利全部权利属于天翼云科技有限公司,未经天翼云科技有限公司许可,擅自商用是侵权行为。如果您想购买此专利、获得商业授权和技术合作,请联系【客服】
本文链接:http://www.vipzhuanli.com/pat/books/202310220493.9/1.html,转载请声明来源钻瓜专利网。
- 上一篇:图像拼接方法、装置、设备及存储介质
- 下一篇:一种散斑角度可调的深度相机
- 数据显示系统、数据中继设备、数据中继方法、数据系统、接收设备和数据读取方法
- 数据记录方法、数据记录装置、数据记录媒体、数据重播方法和数据重播装置
- 数据发送方法、数据发送系统、数据发送装置以及数据结构
- 数据显示系统、数据中继设备、数据中继方法及数据系统
- 数据嵌入装置、数据嵌入方法、数据提取装置及数据提取方法
- 数据管理装置、数据编辑装置、数据阅览装置、数据管理方法、数据编辑方法以及数据阅览方法
- 数据发送和数据接收设备、数据发送和数据接收方法
- 数据发送装置、数据接收装置、数据收发系统、数据发送方法、数据接收方法和数据收发方法
- 数据发送方法、数据再现方法、数据发送装置及数据再现装置
- 数据发送方法、数据再现方法、数据发送装置及数据再现装置





