[发明专利]一种适用于机器学习的数据管理方法和数据管理装置有效
| 申请号: | 202110088033.6 | 申请日: | 2021-01-22 |
| 公开(公告)号: | CN112819176B | 公开(公告)日: | 2022-11-08 |
| 发明(设计)人: | 赵家志 | 申请(专利权)人: | 烽火通信科技股份有限公司 |
| 主分类号: | G06N20/00 | 分类号: | G06N20/00;H04L41/044;H04L41/0631 |
| 代理公司: | 深圳市六加知识产权代理有限公司 44372 | 代理人: | 宋建平 |
| 地址: | 430000 湖北省武*** | 国省代码: | 湖北;42 |
| 权利要求书: | 查看更多 | 说明书: | 查看更多 |
| 摘要: | |||
| 搜索关键词: | 一种 适用于 机器 学习 数据管理 方法 装置 | ||
1.一种适用于机器学习的数据管理方法,其特征在于,所述数据管理方法应用于数据管理装置,所述数据管理装置部署在通信设备的指定层级,所述数据管理方法包括:
所述数据管理装置接收智能应用的注册任务,其中,所述注册任务包括所述智能应用所需数据的F个数据标签、采集步长S和返回批次B,F≥1;
获取所述数据标签所对应的目标数据的离散值,将该离散值填充至全局数据存储区相应的时间序列;
在所述注册任务对应的时间序列满足回送条件时,按照数据标签的注册顺序从相应的时间序列上提取B×S个数值形成F个向量,每一个向量由B×S个数值形成,将F个向量联合变形得到B×S×F维张量,将该B×S×F维张量分发给相应的智能应用任务。
2.根据权利要求1所述的数据管理方法,其特征在于,所述注册任务还包括采样间隔,所述目标数据包括连续数据和离散数据,每一所述时间序列均具有序列标识,所述连续数据所对应的时间序列的序列标识由该所述连续数据所对应的数据标签和采样间隔形成,所述离散数据所对应的时间序列的序列标识由该所述离散数据所对应的数据标签形成;
所述管理方法包括:
当目标数据为连续数据时,判断在全局数据存储区是否存在序列标识包含该连续数据的数据标签的已有时间序列,且该连续数据的采样间隔是已有时间序列的采样间隔的整数倍或约数;
若存在,则共享已有时间序列,其中,共享原则为:若该连续数据的采样间隔是已有时间序列的采样间隔整数倍,则直接共享已有时间序列;若该连续数据的采样间隔是已有时间序列的采样间隔约数,则调整已有时间序列的采样间隔之后,再共享已有时间序列;
若不存在,则新增时间序列,并以该连续数据的数据标签和采样间隔为该时间序列的序列标识。
3.根据权利要求2所述的数据管理方法,其特征在于,所述管理方法包括:
当目标数据为离散数据时,判断在全局数据存储区是否存在序列标识包含该离散数据的数据标签的已有时间序列;
若存在,则共享已有时间序列;
若不存在,则新增时间序列,并以该离散数据的数据标签为该时间序列的序列标识。
4.根据权利要求3所述的数据管理方法,其特征在于,所述获取所述数据标签所对应的目标数据的离散值,将该离散值填充至全局数据存储区相应的时间序列包括:
根据返回结果中所携带的数据标签确定该目标数据为离散数据还是连续数据,其中,所述返回结果中还携带有相应的离散值;
当该目标数据为离散数据时,根据数据标签确定相应的时间序列,并将离散值和该离散值的发生时间填充到时间序列中;
当该目标数据为连续数据时,根据数据标签和采样间隔确定相应的时间序列,将离散值和该离散值的时间戳填充到时间序列中。
5.根据权利要求4所述的数据管理方法,其特征在于,所述当该目标数据为连续数据时,根据数据标签和采样间隔确定相应的时间序列,将离散值和该离散值的时间戳填充到时间序列中包括:
当该目标数据为连续数据时,根据数据标签和采样间隔确定相应的时间序列;
根据采样间隔和上一个离散值的时间戳确定中间是否有丢失的数值,如果有丢失的数值,则计算上一次离散值和本次离散值的平均值,将该平均值作为丢失的数值填充到时间序列中;
并将本次离散值和该本次离散值的时间戳填充到时间序列中。
6.根据权利要求1所述的数据管理方法,其特征在于,所述注册任务还包括采样间隔T;所述回送条件为:对于连续数据的时间序列,在该注册任务上一次回送数据后,时间序列上新增的有效数据的数目大于或等于B×S时,满足回送条件;对于离散数据的时间序列,在该注册任务上一次回送数据后,时间流逝大于或等于B×S×T时,满足回送条件。
该专利技术资料仅供研究查看技术是否侵权等信息,商用须获得专利权人授权。该专利全部权利属于烽火通信科技股份有限公司,未经烽火通信科技股份有限公司许可,擅自商用是侵权行为。如果您想购买此专利、获得商业授权和技术合作,请联系【客服】
本文链接:http://www.vipzhuanli.com/pat/books/202110088033.6/1.html,转载请声明来源钻瓜专利网。





