[发明专利]时序指标数据降精度处理方法、装置和计算机设备在审
申请号: | 202110942640.4 | 申请日: | 2021-08-17 |
公开(公告)号: | CN113761021A | 公开(公告)日: | 2021-12-07 |
发明(设计)人: | 李翔远;赵三妨;肖政 | 申请(专利权)人: | 杭州涂鸦信息技术有限公司 |
主分类号: | G06F16/2458 | 分类号: | G06F16/2458;G06F16/22 |
代理公司: | 暂无信息 | 代理人: | 暂无信息 |
地址: | 310013 浙江省杭*** | 国省代码: | 浙江;33 |
权利要求书: | 查看更多 | 说明书: | 查看更多 |
摘要: | |||
搜索关键词: | 时序 指标 数据 精度 处理 方法 装置 计算机 设备 | ||
本申请涉及一种时序指标数据降精度处理方法、装置和计算机设备,其中,该方法包括:接收时序指标数据;根据所述时序指标数据的类型,查找对应的降精度算法;根据所述降精度算法,对所述时序指标数据的元数据信息进行降精度处理。通过本申请,解决了相关技术中对时序数据进行降精度处理存在的成本较高且操作不便的问题。
技术领域
本申请涉及数据处理领域,特别是涉及一种时序指标数据降精度处理方法、装置和计算机设备。
背景技术
在监控等领域,带有时序特征的数据是每间隔一段时间采集某个指标当前的数值。这种数据都是浮点数或整型值,经常在一段时间里变化不大甚至没有变化,因此可以用一些有别于通用压缩算法的实现,将数据量压缩到更高的压缩比,这种数据可以称作时序指标数据。由于时序数据通常具有时效性,用户大部分情况只对最近一段时间的数据比较关心,对很久之前的数据不会很关心,而且监控数据相对于业务数据,即使有一定精度丢失也没有关系,因此时序数据为了减少磁盘占用,除了使用特殊压缩算法外,还会考虑将老数据做降精度处理。
目前的时序数据库,例如influxdb等,采用的降精度实现方法为,让用户自行定义dml语句(数据库操作语句)。这种实现方式,每当有时序数据需要做降精度处理,都需要用户手动添加一个dml语句,运维成本较高,且操作不友好。
目前针对相关技术中对时序数据进行降精度处理存在的成本较高且操作不便的问题,尚未提出有效的解决方案。
发明内容
本申请实施例提供了一种时序指标数据降精度处理方法、装置和计算机设备,以至少解决相关技术中对时序指标数据进行降精度处理存在的成本较高且操作不便的问题。
第一方面,本申请实施例提供了一种时序指标数据降精度处理方法,所述方法包括:
接收时序指标数据;
根据所述时序指标数据的类型,查找对应的降精度算法;
根据所述降精度算法,对所述时序指标数据的元数据信息进行降精度处理。
在其中一些实施例中,在所述根据时序指标数据的类型,查找对应的降精度算法之前,所述方法还包括:
配置所述时序指标数据对应的降精度算法;
将所述时序指标数据的降精度算法和所述时序指标数据的元数据信息关联。
在其中一些实施例中,所述根据所述降精度算法,对所述时序指标数据的元数据信息进行降精度处理,包括:
检测所述时序指标数据的存储时长;
在检测到所述存储时长大于预设时长后,根据查找到的降精度算法,对所述时序指标数据的元数据信息进行降精度处理。
在其中一些实施例中,所述方法还包括:
配置所述时序指标数据的存储策略,所述存储策略指定所述时序指标数据在存储预设时间后进行降精度处理。
在其中一些实施例中,所述配置所述时序指标数据对应的降精度算法,包括:
在所述时序指标数据的数据写入请求中配置对应的降精度算法;或,
在存储系统创建schema表时,配置所述时序指标数据对应的降精度算法。
在其中一些实施例中,所述时序指标数据的降精度算法包括:
Max:取预设时间精度范围内所有时序指标数据的最大值;
Min:取预设时间精度范围内所有时序指标数据的最小值;
Gauge:取预设时间精度范围内所有时序指标数据中的最后一个值;
该专利技术资料仅供研究查看技术是否侵权等信息,商用须获得专利权人授权。该专利全部权利属于杭州涂鸦信息技术有限公司,未经杭州涂鸦信息技术有限公司许可,擅自商用是侵权行为。如果您想购买此专利、获得商业授权和技术合作,请联系【客服】
本文链接:http://www.vipzhuanli.com/pat/books/202110942640.4/2.html,转载请声明来源钻瓜专利网。
- 数据显示系统、数据中继设备、数据中继方法、数据系统、接收设备和数据读取方法
- 数据记录方法、数据记录装置、数据记录媒体、数据重播方法和数据重播装置
- 数据发送方法、数据发送系统、数据发送装置以及数据结构
- 数据显示系统、数据中继设备、数据中继方法及数据系统
- 数据嵌入装置、数据嵌入方法、数据提取装置及数据提取方法
- 数据管理装置、数据编辑装置、数据阅览装置、数据管理方法、数据编辑方法以及数据阅览方法
- 数据发送和数据接收设备、数据发送和数据接收方法
- 数据发送装置、数据接收装置、数据收发系统、数据发送方法、数据接收方法和数据收发方法
- 数据发送方法、数据再现方法、数据发送装置及数据再现装置
- 数据发送方法、数据再现方法、数据发送装置及数据再现装置