[发明专利]UID编码方法、OpenTSDB和服务器在审
申请号: | 202310031948.2 | 申请日: | 2023-01-10 |
公开(公告)号: | CN116126637A | 公开(公告)日: | 2023-05-16 |
发明(设计)人: | 陈培;李泽敏;郑熙映 | 申请(专利权)人: | 深圳华为云计算技术有限公司 |
主分类号: | G06F11/30 | 分类号: | G06F11/30;G06F16/22;G06F16/23;G06F16/27 |
代理公司: | 北京亿腾知识产权代理事务所(普通合伙) 11309 | 代理人: | 陈霁 |
地址: | 518129 广东省深圳市龙岗区*** | 国省代码: | 广东;44 |
权利要求书: | 查看更多 | 说明书: | 查看更多 |
摘要: | |||
搜索关键词: | uid 编码 方法 opentsdb 服务器 | ||
一种基于Open TSDB的UID编码方法,Open TSDB解除一个节点与一个RS建立通信连接的关系,让一个可以与一个或多个RS建立通信连接,以及一个RS可以与一个或多个节点建立通信连接。当一个节点瞬间新增大量的时间线时,让多个RS协助一个节点生成UID,以提高单个节点的编码效率,节点不会出现写入瓶颈的问题。
技术领域
本发明涉及Open TSDB技术领域,尤其涉及一种UID编码方法、Open TSDB和服务器。
背景技术
开放式时序数据库(open time series database,Open TSDB)是基于HBase的分布式、可扩展的时序数据库。Open TSDB主要应用于监控领域,用于收集、存储及查询大规模集群的监控指标数据,如中央处理器(central processing unit,CPU)的使用率、磁盘的使用率等。大规模集群的监控系统每间隔一段时间,会产生大量的监控指标数据。Open TSDB在保证查询有效的情况下,降低存储成本是非常重要的。
发明内容
为了解决上述的问题,本申请的实施例中提供了一种UID编码方法,在一个节点110瞬间新增大量的时间线时,让多个RS 210协助一个节点110生成UID,以提高单个节点110的编码效率,节点110不会出现写入瓶颈的问题。另外,本申请还提供了与基于OpenTSDB的UID编码方法对应的创建UID表方法、Open TSDB和服务器。
为此,本申请的实施例中采用如下技术方案:
第一方面,本申请提供一种UID编码方法,所述Open TSDB包括TSDB和HBase,所述TSDB包括多个节点,所述HBase包括多个RS,一个节点与至少一个RS建立通信连接,所述方法包括:目标节点根据接收的字符串确定出目标RS,所述多个节点包括所述目标节点,所述多个RS包括所述目标RS;所述目标节点向所述HBase发送请求指令;所述HBase基于请求指令,控制所述目标RS与所述目标节点建立通信连接;所述目标节点向所述目标RS发送所述字符串;所述目标RS根据所述字符串生成UID。
在该实施方式中,Open TSDB解除一个节点与一个RS建立通信连接的关系,让一个可以与一个或多个RS建立通信连接,以及一个RS可以与一个或多个节点建立通信连接。当一个节点瞬间新增大量的时间线时,让多个RS协助一个节点生成UID,以提高单个节点的编码效率,节点不会出现写入瓶颈的问题。
在一种实施方式中,所述目标节点根据接收的字符串确定出目标RS,包括:所述目标节点将所述字符串输入hash值生成器,得到hash值;所述目标节点将所述hash值进行处理,并自身存储的各个RS的标识进行比对,确定出所述目标RS。
在一种实施方式中,所述目标RS根据所述字符串生成UID,包括:所述目标RS根据所述字符串,触发雪花算法生成所述字符串的UID。
在一种实施方式中,还包括:所述目标RS将所述字符串和所述UID写入UID表,以及向所述目标节点发送所述UID。
第二方面,本申请提供一种创建UID表方法,所述Open TSDB包括TSDB和HBase,所述方法包括:所述TSDB的节点向所述HBase发送查询请求,所述查询请求指示所述HBase查询目标UID表,并获取所述目标UID表的创建时间;所述HBase基于所述查询请求,向所述TSDB的节点发送所述目标UID表的创建时间;所述TSDB的节点根据所述目标UID表的创建时间和当前时间,确定所述目标UID表的存在时间,以及响应于所述目标UID表的存在时间大于设定时间,向所述HBase发送构建第一UID表的信息;所述HBase基于所述第一UID表的信息,构建所述第一UID表,并将所述目标UID表的数据写入所述第一UID表。
在该实施方式中,Open TSDB利用缓存回写技术,将上一个周期的UID表缓存直接写入新周期的UID表,实现快速创建新UID表,以及旧UID表的老化,解决现有Open TSDB占用过多资源的问题。
该专利技术资料仅供研究查看技术是否侵权等信息,商用须获得专利权人授权。该专利全部权利属于深圳华为云计算技术有限公司,未经深圳华为云计算技术有限公司许可,擅自商用是侵权行为。如果您想购买此专利、获得商业授权和技术合作,请联系【客服】
本文链接:http://www.vipzhuanli.com/pat/books/202310031948.2/2.html,转载请声明来源钻瓜专利网。