[发明专利]数据快速变更方法、系统及相关设备在审
申请号: | 202211700882.3 | 申请日: | 2022-12-28 |
公开(公告)号: | CN116233249A | 公开(公告)日: | 2023-06-06 |
发明(设计)人: | 陈婧华;刘朝阳;姜先荣;唐亮;杨刚刚 | 申请(专利权)人: | 中国电信股份有限公司 |
主分类号: | H04L67/5682 | 分类号: | H04L67/5682;H04L67/1095;H04L67/1097;H04L69/22;G06F16/27 |
代理公司: | 北京律智知识产权代理有限公司 11438 | 代理人: | 孙宝海 |
地址: | 100033 *** | 国省代码: | 北京;11 |
权利要求书: | 查看更多 | 说明书: | 查看更多 |
摘要: | |||
搜索关键词: | 数据 快速 变更 方法 系统 相关 设备 | ||
1.一种数据快速变更方法,其特征在于,所述方法包括:
解析原始全量网络数据得到原始库数据;
同步所述原始库数据至业务库数据;
将采集的每批次全量数据作为临时数据与原始库数据进行比对;
根据比对结果对所述原始库数据进行相应变更操作;
将所述原始库数据的所有变更操作形成日志记录;以及
根据所述日志记录对所述业务库数据执行变更操作。
2.根据权利要求1所述的数据快速更新方法,其特征在于,解析原始全量网络数据得到原始库数据的步骤包括:
获取所述原始全量网络数据源网元的标识信息;
根据所述标识信息确定存储分区数量;
将网元唯一标识通过该算法映射到一个哈希散列值;以及
根据所述原始全量网络数据所属的网元所映射的哈希值,存储到固定的分区得到原始库数据。
3.根据权利要求2所述的数据快速更新方法,其特征在于,将采集的每批次全量数据作为临时数据与原始库数据进行比对的步骤包括:
将采集的每批次全量数据作为临时数据和所述原始库数据按逐个分区进行数据比对。
4.根据权利要求1所述的数据快速变更方法,其特征在于,根据所述日志记录对所述业务库数据执行变更操作的步骤包括:
将所述日志记录发送至消息中间件;
订阅所述消息中间件上的变更消息主题,接收数据变更消息,并逐条根据消息对所述业务库数据执行变更操作。
5.根据权利要求1所述的数据快速变更方法,其特征在于,同步所述原始库数据至业务库数据的步骤包括:
定期导出所述原始库的全量网络数据;
解析所述全量网络数据并保存至所述业务库。
6.一种数据快速变更系统,其特征在于,所述系统包括:采集层服务模块、业务库模块、原始库模块以及业务层服务模块,其中,
采集层服务模块,用于解析原始全量网络数据得到原始库数据;
原始库模块,用于存储原始库数据;
业务库模块,用于同步所述原始库数据至业务库数据;
所述采集层服务模块,还用于将采集的每批次全量数据作为临时数据与原始库数据进行比对;根据比对结果对所述原始库数据进行相应变更操作;
原始库模块,还用于将所述原始库数据的所有变更操作形成日志记录;以及
业务层服务模块,用于根据所述日志记录对所述业务库数据执行变更操作。
7.根据权利要求6所述的数据快速变更系统,其特征在于,所述系统还包括变更发送服务模块,其中
所述变更发送服务模块,用于将所述日志记录发送至所述消息中间件模块;
由所述业务层服务模块订阅所述消息中间件上的变更消息主题,接收数据变更消息,并逐条根据消息对所述业务库数据执行变更操作。
8.根据权利要求7所述的数据快速变更系统,其特征在于,所述业务库模块中还包括:全量文件导出模块和全量文件解析模块,其中,
所述全量文件导出模块,用于定期导出所述原始库的全量网络数据;
所述全量文件解析模块,用于解析所述全量网络数据并保存至所述业务库。
9.一种电子设备,其特征在于,包括:
处理器;以及
存储器,用于存储所述处理器的可执行指令;
其中,所述处理器配置为经由执行所述可执行指令来执行权利要求1~5中任意一项所述的数据快速变更方法。
10.一种计算机可读存储介质,其上存储有计算机程序,其特征在于,所述计算机程序被处理器执行时实现权利要求1~5中任意一项所述的数据快速变更方法。
该专利技术资料仅供研究查看技术是否侵权等信息,商用须获得专利权人授权。该专利全部权利属于中国电信股份有限公司,未经中国电信股份有限公司许可,擅自商用是侵权行为。如果您想购买此专利、获得商业授权和技术合作,请联系【客服】
本文链接:http://www.vipzhuanli.com/pat/books/202211700882.3/1.html,转载请声明来源钻瓜专利网。
- 上一篇:一种数据加载方法、装置及电子设备
- 下一篇:一种桨壳模锻件及其制备方法
- 数据显示系统、数据中继设备、数据中继方法、数据系统、接收设备和数据读取方法
- 数据记录方法、数据记录装置、数据记录媒体、数据重播方法和数据重播装置
- 数据发送方法、数据发送系统、数据发送装置以及数据结构
- 数据显示系统、数据中继设备、数据中继方法及数据系统
- 数据嵌入装置、数据嵌入方法、数据提取装置及数据提取方法
- 数据管理装置、数据编辑装置、数据阅览装置、数据管理方法、数据编辑方法以及数据阅览方法
- 数据发送和数据接收设备、数据发送和数据接收方法
- 数据发送装置、数据接收装置、数据收发系统、数据发送方法、数据接收方法和数据收发方法
- 数据发送方法、数据再现方法、数据发送装置及数据再现装置
- 数据发送方法、数据再现方法、数据发送装置及数据再现装置