[发明专利]数据监控控制系统、方法、装置、电子设备和存储介质在审
申请号: | 202011000372.6 | 申请日: | 2020-09-22 |
公开(公告)号: | CN112130996A | 公开(公告)日: | 2020-12-25 |
发明(设计)人: | 黄雷 | 申请(专利权)人: | 腾讯科技(深圳)有限公司 |
主分类号: | G06F9/50 | 分类号: | G06F9/50 |
代理公司: | 北京同达信恒知识产权代理有限公司 11291 | 代理人: | 李娟 |
地址: | 518044 广东省深圳*** | 国省代码: | 广东;44 |
权利要求书: | 查看更多 | 说明书: | 查看更多 |
摘要: | |||
搜索关键词: | 数据 监控 控制系统 方法 装置 电子设备 存储 介质 | ||
1.一种数据监控控制系统,其特征在于,包括:多个监控节点、时间序列数据库和协调器;
所述多个监控节点中的每个监控节点,分别用于通过服务发现得到监控目标,并将得到的每个监控目标上报给所述协调器;接收所述协调器分配的监控目标集合,对所述监控目标集合中的每个监控目标进行数据抓取,将抓取的监控数据发送给所述时间序列数据库;
所述时间序列数据库,用于对各个监控节点抓取到的监控数据进行汇总;
所述协调器,用于获取各个监控节点分别上报的各个监控目标的数据规模,根据各个监控目标的数据规模以及预先配置的分片规则,为每个监控节点分配相应的监控目标集合,并通知各个监控节点。
2.如权利要求1所述的系统,其特征在于,所述协调器具体用于:
接收各个监控节点分别上报的各个监控目标,探测各个监控目标的数据规模;在为每个监控节点分配相应的监控目标集合之后,将监控目标集合中的各个监控目标的数据规模下发给相应的监控节点;或
接收各个监控节点分别上报的各个监控目标更新后的数据规模。
3.如权利要求1所述的系统,其特征在于,所述协调器还用于:
根据获取到的所有监控目标的数据规模总和,以及各个监控节点的数据抓取能力,控制所述多个监控节点的数量。
4.如权利要求1所述的系统,其特征在于,每个监控节点分别包括一个监控服务器和一个容器进程服务器;
所述监控服务器,用于发起针对待抓取监控目标的数据抓取请求,基于预先配置的目标配置文件,将所述数据抓取请求代理至对应的容器进程服务器;接收所述容器进程服务器返回的针对所述数据抓取请求的数据抓取结果;
所述容器进程服务器,在接收到所述数据抓取请求后,根据所述监控目标集合进行数据抓取,获取针对所述数据抓取请求的数据抓取结果,并将所述数据抓取结果返回给所述监控服务器。
5.如权利要求4所述的系统,其特征在于,所述容器进程服务器具体用于:
根据所述监控服务器针对待抓取监控目标的数据抓取请求,在所述待抓取监控目标位于所述监控目标集合中时,向所述待抓取监控目标发送数据抓取请求;从所述待抓取监控目标抓取监控数据,并将抓取的监控数据返回给所述监控服务器;或
在所述待抓取监控目标不位于所述监控目标集合中时,向所述监控服务器返回空值。
6.如权利要求4所述的系统,其特征在于,所述目标配置文件包括代理指示信息以及容器进程服务器的网络地址信息;所述监控服务器具体用于:
根据所述目标配置文件中的代理指示信息以及容器进程服务器的网络地址信息,将所述数据抓取请求以超文本传输协议代理至所述容器进程服务器,其中所述目标配置文件是由所述容器进程服务器获取并更新的。
7.如权利要求1~6任一所述的系统,其特征在于,所述协调器具体用于:
获取各个监控节点当前所抓取的各个监控目标的数据规模总和;
针对所述数据规模总和超过预设阈值的第一类监控节点,从所述第一类监控节点当前所抓取的各个监控目标中选取至少一个候选监控目标后,将剩余的所有监控目标所组成的集合作为所述第一类监控节点的监控目标集合,其中所述分片规则包括所述第一类监控节点的监控目标集合中各个监控目标的数据规模总和不低于所述预设阈值;
针对所述数据规模总和不超过所述预设阈值的第二类监控节点,将所述第二类监控节点当前所抓取的各个监控目标所组成的集合作为所述第二类监控节点的监控目标集合,其中所述分片规则包括所述第二类监控节点的监控目标集合中的各个监控目标的数据规模总和不超过所述预设阈值;或者将所述第二类监控节点当前所抓取的各个监控目标以及至少一个候选监控目标所组成的集合作为所述第二类监控节点的监控目标集合,其中所述分片规则包括所述第二类监控节点的监控目标集合中的各个监控目标以及所述候选监控目标的数据规模总和不超过所述预设阈值。
该专利技术资料仅供研究查看技术是否侵权等信息,商用须获得专利权人授权。该专利全部权利属于腾讯科技(深圳)有限公司,未经腾讯科技(深圳)有限公司许可,擅自商用是侵权行为。如果您想购买此专利、获得商业授权和技术合作,请联系【客服】
本文链接:http://www.vipzhuanli.com/pat/books/202011000372.6/1.html,转载请声明来源钻瓜专利网。
- 上一篇:电路板软件烧入工装
- 下一篇:一种农家用自制面皮切割装置
- 数据显示系统、数据中继设备、数据中继方法、数据系统、接收设备和数据读取方法
- 数据记录方法、数据记录装置、数据记录媒体、数据重播方法和数据重播装置
- 数据发送方法、数据发送系统、数据发送装置以及数据结构
- 数据显示系统、数据中继设备、数据中继方法及数据系统
- 数据嵌入装置、数据嵌入方法、数据提取装置及数据提取方法
- 数据管理装置、数据编辑装置、数据阅览装置、数据管理方法、数据编辑方法以及数据阅览方法
- 数据发送和数据接收设备、数据发送和数据接收方法
- 数据发送装置、数据接收装置、数据收发系统、数据发送方法、数据接收方法和数据收发方法
- 数据发送方法、数据再现方法、数据发送装置及数据再现装置
- 数据发送方法、数据再现方法、数据发送装置及数据再现装置