[发明专利]一种基于属性分组的时序数据压缩方法有效
申请号: | 201611106869.X | 申请日: | 2016-12-06 |
公开(公告)号: | CN108153483B | 公开(公告)日: | 2021-04-20 |
发明(设计)人: | 张俊;钱峰;徐丹 | 申请(专利权)人: | 南京南瑞继保电气有限公司;南京南瑞继保工程技术有限公司 |
主分类号: | G06F3/06 | 分类号: | G06F3/06 |
代理公司: | 南京经纬专利商标代理有限公司 32200 | 代理人: | 葛潇敏 |
地址: | 211102 江*** | 国省代码: | 江苏;32 |
权利要求书: | 查看更多 | 说明书: | 查看更多 |
摘要: | |||
搜索关键词: | 一种 基于 属性 分组 时序 数据压缩 方法 | ||
1.一种基于属性分组的时序数据压缩方法,其特征在于包括如下步骤:
(1)服务端接收并保存每个测点的数据到缓冲区,将时序数据序列划分为时间戳、值、质量码序列;
(2)记录时间戳序列起始时间,再将具有相同变化周期的时间戳按序分组,记录每组起始时间戳与本缓冲区起始时间的差值、该组的变化周期以及本组时间戳个数;
(3)将浮点数分解成“符号-指数”位和“尾数位”,将具有相同“符号-指数”位的浮点数按序分组,记录每个分组的“符号-指数”位、浮点数个数以及“尾数”位序列;
(4)将具有相同质量码值的质量码序列按序分组,记录每个分组的质量码及质量码个数;
(5)将分组数据复制到压缩缓冲区,使用zlib算法对该缓冲区进行无损压缩。
2.如权利要求1所述的一种基于属性分组的时序数据压缩方法,其特征在于:所述步骤(1)中,每个缓冲区大小默认设为1024,每条时序数据是一个三元组时间戳,值,质量码,为每条数据分配一个缓冲区,当缓冲区满时,将缓冲区中时序数据序列按三个属性划分为时间戳序列、值序列、质量码序列,启动压缩流程。
3.如权利要求1所述的一种基于属性分组的时序数据压缩方法,其特征在于:所述步骤(2)中,对于一个长度为m的时间戳序列{t1,t2,…tm},假设分成s个分组,则分组后的序列变成{TΔ1,P1,n1},{TΔ2,P2,n2},{TΔ3,P3,n3}…{TΔs,Ps,ns},其中n1+n2+…ns=m,TΔi为第i组的起始时间戳与本缓冲区起始时间Tstart的差,Pi为第i组的变化周期,ni为第i组的时间戳个数。
4.如权利要求1所述的一种基于属性分组的时序数据压缩方法,其特征在于:所述步骤(3)中,一个具有k个不同“符号-指数”位的浮点数序列具有如下形式:{sign1,n1,tail1},{sign2,n2,tail2},…,{signk,nk,tailk},其中,signi是公共“符号-指数”位,taili是尾数位序列,ni是尾数为序列长度,i=1,2,…,k。
5.如权利要求1所述的一种基于属性分组的时序数据压缩方法,其特征在于:所述步骤(3)的详细内容是:根据32位单精度浮点数的内存表示,将浮点数拆分成1位符号位、8位指数位、23位尾数位,提取公共的9位“符号-指数”位,将具有相同“符号-指数”位的浮点数按序分组,记录组内“符号-指数”位、“尾数位”序列、尾数位序列长度。
6.如权利要求1所述的一种基于属性分组的时序数据压缩方法,其特征在于:所述步骤(4)中,一个有l个分组的质量码序列的形式是:{f1,n1},{f2,n2},{f3,n3},…,{fl,nl},其中,fi是质量码值,ni是该组相同质量码个数,i=1,2,…,l。
7.如权利要求1所述的一种基于属性分组的时序数据压缩方法,其特征在于:所述步骤(5)中,压缩缓冲区内存分布如下:{起始时间,时间戳分组,浮点值分组,质量码分组}。
该专利技术资料仅供研究查看技术是否侵权等信息,商用须获得专利权人授权。该专利全部权利属于南京南瑞继保电气有限公司;南京南瑞继保工程技术有限公司,未经南京南瑞继保电气有限公司;南京南瑞继保工程技术有限公司许可,擅自商用是侵权行为。如果您想购买此专利、获得商业授权和技术合作,请联系【客服】
本文链接:http://www.vipzhuanli.com/pat/books/201611106869.X/1.html,转载请声明来源钻瓜专利网。