[发明专利]一种时序数据压缩方法、装置及设备有效
申请号: | 202111577766.2 | 申请日: | 2021-12-22 |
公开(公告)号: | CN114327264B | 公开(公告)日: | 2023-05-12 |
发明(设计)人: | 冯刚义 | 申请(专利权)人: | 北京力控元通科技有限公司 |
主分类号: | G06F3/06 | 分类号: | G06F3/06 |
代理公司: | 北京三聚阳光知识产权代理有限公司 11250 | 代理人: | 林韵英 |
地址: | 100193 北京市海淀区天秀路10号中*** | 国省代码: | 北京;11 |
权利要求书: | 查看更多 | 说明书: | 查看更多 |
摘要: | |||
搜索关键词: | 一种 时序 数据压缩 方法 装置 设备 | ||
本发明提供了一种时序数据压缩方法、装置及设备,该方法包括:基于预设时间范围获取时序数据信息,并提取所述预设时间范围内的起始时序数据信息;基于所述时序数据信息提取时序数据格式信息,并基于所述起始时序数据信息获取待压缩的时序数据格式信息,所述时序数据格式信息包括数值、数值获取时间数据、数值产生时间数据、质量戳;分别对所述待压缩的时序数据格式信息的数值、数值获取时间数据、数值产生时间数据、质量戳进行压缩;对压缩后的数值、数值获取时间数据、数值产生时间数据、质量戳进行整合,得到时序数据压缩结果。通过对采集到的时序数据信息进行压缩、整合,提高了数据压缩效率,极大的节省了存储空间。
技术领域
本发明涉及数据计算技术领域,具体涉及一种时序数据压缩方法、装置及设备。
背景技术
近年来,国家不断推行精益求精、智能制造、柔性制造、敏捷制造、制造全球化等先进制造理念,力争逐步由制造大国向制造强国转变,由中国制造向中国创造过度。采用现代信息技术,充分利用计算机网络及通讯技术,支持企业的产品开发、生产、销售、服务等各个环节,实现信息采集、加工和管理的网络化、集成化和实时化,最终实现企业全面数字化管理,也因此而产生了海量数据。
在工业生产过程中,生产数据需要存储数值、时间和质量戳,如果不对数据采用压缩技术,每一个时刻的数据需要占用17个字节的存储空间,以100万个采集点为例,每3秒存储一次数据,一天的数据存储需要占用477G的空间,一个月的数据就需要占用136.8T的存储空间。可见,现有的数据压缩技术仍然会占用较大的存储空间。
发明内容
因此,本发明要解决的技术问题在于克服现有技术中压缩数据后仍占用较大存储空间的问题,从而提供一种时序数据压缩方法、装置及设备。
根据第一方面,本发明实施例提供了一种时序数据压缩方法,包括如下步骤:基于预设时间范围获取时序数据信息,并提取所述预设时间范围内的起始时序数据信息;基于所述时序数据信息提取时序数据格式信息,并基于所述起始时序数据信息获取待压缩的时序数据格式信息,所述时序数据格式信息包括数值、数值获取时间数据、数值产生时间数据、质量戳;分别对所述待压缩的时序数据格式信息的数值、数值获取时间数据、数值产生时间数据、质量戳进行压缩;对压缩后的数值、数值获取时间数据、数值产生时间数据、质量戳进行整合,得到时序数据压缩结果。
可选地,对所述待压缩的时序数据格式信息的数值进行压缩,包括:将所述待压缩的时序数据格式信息的数值转化为双精度浮点数数据,得到待压缩预处理数据;基于所述待压缩预处理数据进行异或计算,获得数值压缩结果。
可选地,对所述待压缩的时序数据格式信息的数值获取时间数据进行压缩,包括:基于所述数值获取时间数据获取相邻数值获取时间之间的差值;基于所述差值压缩所述待压缩的时序数据格式信息的数值获取时间数据,获得数值获取时间数据压缩结果。
可选地,对所述待压缩的时序数据格式信息的数值产生时间数据进行压缩,包括:基于数值产生时间数据做二进制数据处理,获得数值产生时间数据处理结果;压缩所述数值产生时间数据处理结果,得到数值产生时间数据压缩结果。
可选地,对所述待压缩的时序数据格式信息的质量戳进行压缩,包括:基于预设的OPC质量列表以及所述质量戳判断所述待压缩的时序数据格式信息是否为良好;若所述待压缩的时序数据格式信息为良好,则对所述质量戳进行数据转换,得到质量戳压缩结果。
可选地,所述对压缩后的数值、数值获取时间数据、数值产生时间数据、质量戳进行整合,得到时序数据压缩结果,包括:获取压缩后的数值、数值获取时间数据、数值产生时间数据、质量戳的获取时间顺序;基于所述获取时间顺序将所述压缩后的数值、数值获取时间数据、数值产生时间数据、质量戳进行排序,得到排序结果;将所述起始时序数据信息与所述排序结果进行整合,得到所述时序数据压缩结果。
该专利技术资料仅供研究查看技术是否侵权等信息,商用须获得专利权人授权。该专利全部权利属于北京力控元通科技有限公司,未经北京力控元通科技有限公司许可,擅自商用是侵权行为。如果您想购买此专利、获得商业授权和技术合作,请联系【客服】
本文链接:http://www.vipzhuanli.com/pat/books/202111577766.2/2.html,转载请声明来源钻瓜专利网。