[发明专利]一种数据治理节点的校验方法、装置、设备及介质有效
| 申请号: | 202210251022.X | 申请日: | 2022-03-15 |
| 公开(公告)号: | CN114611155B | 公开(公告)日: | 2022-12-13 |
| 发明(设计)人: | 付大伟;郑伟 | 申请(专利权)人: | 云粒智慧科技有限公司 |
| 主分类号: | G06F21/64 | 分类号: | G06F21/64;G06F16/23 |
| 代理公司: | 北京品源专利代理有限公司 11332 | 代理人: | 苏舒音 |
| 地址: | 100037 北京市西城*** | 国省代码: | 北京;11 |
| 权利要求书: | 查看更多 | 说明书: | 查看更多 |
| 摘要: | |||
| 搜索关键词: | 一种 数据 治理 节点 校验 方法 装置 设备 介质 | ||
1.一种数据治理节点的校验方法,其特征在于,所述方法包括:
在数据治理节点上线运行时,确定数据治理节点的节点更新时间和治理数据表的数据表更新时间;
若所述节点更新时间和所述数据表更新时间中存在至少一个大于数据治理节点的预存校验时间,则基于数据治理节点的配置内容生成内容摘要,并记录内容摘要生成时间;
若所生成的内容摘要与预存内容摘要的信息一致,则确定所述数据治理节点校验通过;
其中,所述方法还包括:
若所生成的内容摘要与预存内容摘要的信息不一致,则基于所述数据治理节点的配置内容和治理数据表的内容进行逻辑校验;
校验通过后,则基于校验后的配置内容生成内容摘要,以对预存内容摘要进行更新,并基于更新操作的发生时间对预存校验时间进行更新。
2.根据权利要求1所述的方法,其特征在于,在确定数据治理节点的节点更新时间和治理数据表的数据表更新时间之前,所述方法还包括:
若检测到数据治理节点合法性校验完成,则将所述数据治理节点的配置内容采用预设格式生成预存内容摘要,并记录预存校验时间。
3.根据权利要求2所述的方法,其特征在于,在将所述数据治理节点的配置内容采用预设格式生成预存内容摘要之后,所述方法还包括:
若检测到数据治理节点的配置内容更新操作,则基于更新后的配置内容采用预设格式进行处理,以对预存内容摘要进行更新,并基于更新操作的发生时间对预存校验时间进行更新。
4.根据权利要求2或3所述的方法,其特征在于,所述预设格式为对数据治理节点的配置内容采用SHA-256算法计算哈希值。
5.根据权利要求1所述的方法,其特征在于,基于所述数据治理节点的配置内容和治理数据表的内容进行逻辑校验,包括:
基于所述数据治理节点的配置内容和治理数据表的内容,对数据表源节点和目标节点的连通性、字段内容完整性、字段类型对应性、字段映射匹配性以及SQL条件合法性中的至少一种进行逻辑校验。
6.一种数据治理节点的校验装置,其特征在于,所述装置包括:
更新时间确定模块,用于在数据治理节点上线运行时,确定数据治理节点的节点更新时间和治理数据表的数据表更新时间;
内容摘要确定模块,用于若所述节点更新时间和所述数据表更新时间中存在至少一个大于数据治理节点的预存校验时间,则基于数据治理节点的配置内容生成内容摘要,并记录内容摘要生成时间;
数据治理节点校验模块,用于若所生成的内容摘要与预存内容摘要的信息一致,则确定所述数据治理节点校验通过;
其中,所述装置还包括:
逻辑校验模块,用于若所生成的内容摘要与预存内容摘要的信息不一致,则基于所述数据治理节点的配置内容和治理数据表的内容进行逻辑校验;
预存内容摘要更新模块,用于校验通过后,则基于校验后的配置内容生成内容摘要,以对预存内容摘要进行更新,并基于更新操作的发生时间对预存校验时间进行更新。
7.根据权利要求6所述的装置,其特征在于,所述装置还包括:
预存内容摘要确定模块,用于在确定数据治理节点的节点更新时间和治理数据表的数据表更新时间之前,若检测到数据治理节点合法性校验完成,则将所述数据治理节点的配置内容采用预设格式生成预存内容摘要,并记录预存校验时间。
8.一种电子设备,其特征在于,所述电子设备包括:
至少一个处理器;以及
与所述至少一个处理器通信连接的存储器;其中,
所述存储器存储有可被所述至少一个处理器执行的计算机程序,所述计算机程序被所述至少一个处理器执行,以使所述至少一个处理器能够执行权利要求1-5中任一项所述的数据治理节点的校验方法。
9.一种计算机可读存储介质,其特征在于,所述计算机可读存储介质存储有计算机指令,所述计算机指令用于使处理器执行时实现权利要求1-5中任一项所述的数据治理节点的校验方法。
该专利技术资料仅供研究查看技术是否侵权等信息,商用须获得专利权人授权。该专利全部权利属于云粒智慧科技有限公司,未经云粒智慧科技有限公司许可,擅自商用是侵权行为。如果您想购买此专利、获得商业授权和技术合作,请联系【客服】
本文链接:http://www.vipzhuanli.com/pat/books/202210251022.X/1.html,转载请声明来源钻瓜专利网。
- 数据显示系统、数据中继设备、数据中继方法、数据系统、接收设备和数据读取方法
- 数据记录方法、数据记录装置、数据记录媒体、数据重播方法和数据重播装置
- 数据发送方法、数据发送系统、数据发送装置以及数据结构
- 数据显示系统、数据中继设备、数据中继方法及数据系统
- 数据嵌入装置、数据嵌入方法、数据提取装置及数据提取方法
- 数据管理装置、数据编辑装置、数据阅览装置、数据管理方法、数据编辑方法以及数据阅览方法
- 数据发送和数据接收设备、数据发送和数据接收方法
- 数据发送装置、数据接收装置、数据收发系统、数据发送方法、数据接收方法和数据收发方法
- 数据发送方法、数据再现方法、数据发送装置及数据再现装置
- 数据发送方法、数据再现方法、数据发送装置及数据再现装置





