[发明专利]基于时序数据库的能源监测数据存储方法、设备及介质在审
申请号: | 202111425820.1 | 申请日: | 2021-11-26 |
公开(公告)号: | CN114116821A | 公开(公告)日: | 2022-03-01 |
发明(设计)人: | 戴鸿君 | 申请(专利权)人: | 山东浪潮科学研究院有限公司 |
主分类号: | G06F16/2457 | 分类号: | G06F16/2457;G06F16/2458;G06F16/27;G06F16/28 |
代理公司: | 北京君慧知识产权代理事务所(普通合伙) 11716 | 代理人: | 肖鹏 |
地址: | 250101 山东省济*** | 国省代码: | 山东;37 |
权利要求书: | 查看更多 | 说明书: | 查看更多 |
摘要: | |||
搜索关键词: | 基于 时序 数据库 能源 监测 数据 存储 方法 设备 介质 | ||
1.基于时序数据库的能源监测数据存储方法,其特征在于,所述方法包括:
通过日志收集系统,从关系型数据库中查询新增能源监测数据,并根据所述新增能源监测数据的时序采集所述新增能源监测数据;
基于所述新增能源监测数据的时序,将所述新增能源监测数据放入对应的分布式消息队列中;
通过所述分布式消息队列,解除所述日志收集系统与时序数据库之间新增能源监测数据的耦合性,并将所述新增能源监测数据,按照所述时序存储至所述时序数据库中。
2.根据权利要求1所述的基于时序数据库的能源监测数据存储方法,其特征在于,所述基于所述新增能源监测数据的时序,将所述新增能源监测数据放入相应的分布式消息队列中之前,所述方法还包括:
确定所述新增能源监测数据是否为数值数据;
在所述新增能源监测数据为数值数据时,确定所述新增能源监测数据是否在预设区间内;
在所述新增能源监测数据在所述预设区间的情况下,通过预设验证算法,确定所述新增能源监测数据为正常数据的概率;
当所述概率大于或等于预设阈值时,确定所述新增能源监测数据为正常数据。
3.根据权利要求2所述的基于时序数据库的能源监测数据存储方法,其特征在于,所述确定所述新增能源监测数据为正常数据之后,所述方法还包括:
基于所述时序,将采集到的所述新增能源监测数据存储至非关系型数据库中,以对所述新增能源监测数据进行备份。
4.根据权利要求1所述的基于时序数据库的能源监测数据存储方法,其特征在于,所述基于所述新增能源监测数据的时序,将所述新增能源监测数据放入相应的分布式消息队列中之前,所述方法还包括:
将所述新增能源监测数据的前一个新增能源监测数据和后一个新增能源监测数据作为训练样本,训练神经网络模型;
在所述新增能源监测数据不是数值数据或者所述新增能源监测数据为正常数据的概率小于预设阈值的情况下,确定所述新增能源监测数据不是正常数据,则将所述新增能源监测数据的新增时间输入训练好的神经网络模型中,以得到正常的新增能源监测数据。
5.根据权利要求1所述的基于时序数据库的能源监测数据存储方法,其特征在于,所述通过所述分布式消息队列,解除所述日志收集系统与时序数据库之间新增能源监测数据的耦合性之后,所述方法还包括:
通过预设的实时处理系统,对解耦后的新增能源监测数据进行分析;
若所述新增能源监测数据的主键为空,则将所述新增能源监测数据丢失,以确定所述新增能源监测数据与所述时序数据库的存储要求相符;其中,所述存储要求包括所述新增能源监测数据的主键不能为空;
确定出所述时序数据库的数据存储格式,将符合所述存储要求的新增能源监测数据统一转换为所述时序数据库的数据存储格式。
6.根据权利要求1所述的基于时序数据库的能源监测数据存储方法,其特征在于,所述将所述新增能源监测数据,按照所述时序存储至所述时序数据库中之后,所述方法还包括:
通过数据转换模块,基于预先配置的数据转换规则,对所述时序数据库中的所述新增能源监测数据进行数据转换;
将转换完的新增能源监测数据存储至非关系型数据库,以通过所述非关系型数据库对所述新增能源监测数据进行分析。
7.根据权利要求1所述的基于时序数据库的能源监测数据存储方法,其特征在于,所述将所述新增能源监测数据,按照所述时序存储至所述时序数据库中之前,所述方法还包括:
通过所述分布式消息队列,去除若干所述新增能源监测数据中的峰值,并对去除峰值后的新增能源监测数据进行存储。
8.根据权利要求1所述的基于时序数据库的能源监测数据存储方法,其特征在于,所述将所述新增能源监测数据,按照所述时序存储至所述时序数据库中之后,所述方法还包括:
从所述时序数据库中获取所述新增能源监测数据,并基于所述时序,生成对应的新增能源监测数据曲线;
根据所述新增能源监测数据曲线的变化幅度,确定所述新增能源监测数据是否异常。
该专利技术资料仅供研究查看技术是否侵权等信息,商用须获得专利权人授权。该专利全部权利属于山东浪潮科学研究院有限公司,未经山东浪潮科学研究院有限公司许可,擅自商用是侵权行为。如果您想购买此专利、获得商业授权和技术合作,请联系【客服】
本文链接:http://www.vipzhuanli.com/pat/books/202111425820.1/1.html,转载请声明来源钻瓜专利网。
- 上一篇:一种巡视机器人可识别围栏
- 下一篇:一种防干扰的大数据服务器装置