[发明专利]数据处理方法、装置、系统及存储介质在审
申请号: | 201911188291.0 | 申请日: | 2019-11-28 |
公开(公告)号: | CN112860715A | 公开(公告)日: | 2021-05-28 |
发明(设计)人: | 隋玉杰 | 申请(专利权)人: | 北京沃东天骏信息技术有限公司 |
主分类号: | G06F16/23 | 分类号: | G06F16/23 |
代理公司: | 北京同立钧成知识产权代理有限公司 11205 | 代理人: | 钭飒飒;刘芳 |
地址: | 100076 北京市经济技术开*** | 国省代码: | 北京;11 |
权利要求书: | 查看更多 | 说明书: | 查看更多 |
摘要: | |||
搜索关键词: | 数据处理 方法 装置 系统 存储 介质 | ||
1.一种数据处理方法,其特征在于,包括:
对待更新数据进行时间戳包装,得到包装后的数据;
将所述包装后的数据存入缓存空间中;
根据预设周期,遍历所述缓存空间,获取所述缓存空间中所述包装后的数据的时间戳所对应的时间;
若所述包装后的数据的时间戳所对应的时间小于当前时间,则将所述包装后的数据写入数据库中。
2.根据权利要求1所述的方法,其特征在于,所述对待更新数据进行时间戳包装,得到包装后的数据,包括:
在所述待更新数据中添加起始时间点和有效时间段,得到所述包装后的数据;其中,所述起始时间点包括:数据生成时间,或数据上一次的更新时间;所述有效时间段包括:数据不变更的上限时间。
3.根据权利要求1所述的方法,其特征在于,将所述包装后的数据存入缓存空间中,包括:
获取所述待更新数据的数据标识;
若所述缓存空间中存在所述数据标识对应的数据,则将所述包装后的数据覆盖缓存空间中所述数据标识对应的数据;
若所述缓存空间中不存在所述数据标识对应的数据,则将所述包装后的数据存入所述缓存空间中。
4.根据权利要求2所述的方法,其特征在于,获取所述缓存空间中所述包装后的数据的时间戳所对应的时间,包括:
获取所述缓存空间中所述包装后的数据的起始时间点和有效时间段;
计算所述起始时间点和所述有效时间段之和,得到所述包装后的数据的时间戳所对应的时间。
5.根据权利要求1-4中任一项所述的方法,其特征在于,还包括:
若所述包装后的数据的时间戳所对应的时间小于当前时间,则删除所述缓存空间中的所述包装后的数据。
6.根据权利要求1-4中任一项所述的方法,其特征在于,还包括:
若所述包装后的数据的时间戳所对应的时间不小于当前时间,则不将所述包装后的数据写入所述数据库中。
7.一种数据处理装置,其特征在于,包括:
包装模块,用于对待更新数据进行时间戳包装,得到包装后的数据;
存储模块,用于将所述包装后的数据存入缓存空间中;
遍历模块,用于根据预设周期,遍历所述缓存空间,获取所述缓存空间中所述包装后的数据的时间戳所对应的时间;
处理模块,用于在所述包装后的数据的时间戳所对应的时间小于当前时间时,将所述包装后的数据写入数据库中。
8.根据权利要求7所述的装置,其特征在于,所述包装模块,具体用于:
在所述待更新数据中添加起始时间点和有效时间段,得到所述包装后的数据;其中,所述起始时间点包括:数据生成时间,或数据上一次的更新时间;所述有效时间段包括:数据不变更的上限时间。
9.一种数据仓库的数据处理系统,其特征在于,包括:存储器、处理器,存储器中存储有所述处理器的可执行指令;其中,所述处理器配置为经由执行所述可执行指令来执行权利要求1-6所述的数据处理方法。
10.一种计算机可读存储介质,其上存储有计算机程序,其特征在于,该程序被处理器执行时实现权利要求1-6所述的数据处理方法。
该专利技术资料仅供研究查看技术是否侵权等信息,商用须获得专利权人授权。该专利全部权利属于北京沃东天骏信息技术有限公司,未经北京沃东天骏信息技术有限公司许可,擅自商用是侵权行为。如果您想购买此专利、获得商业授权和技术合作,请联系【客服】
本文链接:http://www.vipzhuanli.com/pat/books/201911188291.0/1.html,转载请声明来源钻瓜专利网。