[发明专利]数据一致性的检测方法、装置和计算机设备有效
| 申请号: | 201910660233.7 | 申请日: | 2019-07-22 |
| 公开(公告)号: | CN110377704B | 公开(公告)日: | 2022-04-22 |
| 发明(设计)人: | 刘盼;郭方园;蒋雨倩;晋小玲;邝智杰 | 申请(专利权)人: | 北京百度网讯科技有限公司 |
| 主分类号: | G06F16/33 | 分类号: | G06F16/33;G06F16/36 |
| 代理公司: | 北京清亦华知识产权代理事务所(普通合伙) 11201 | 代理人: | 石茵汀 |
| 地址: | 100085 北京市*** | 国省代码: | 北京;11 |
| 权利要求书: | 查看更多 | 说明书: | 查看更多 |
| 摘要: | |||
| 搜索关键词: | 数据一致性 检测 方法 装置 计算机 设备 | ||
1.一种数据一致性的检测方法,其特征在于,所述方法包括:
获取两版本图谱,确定各实体在所述两版本图谱中的第一属性信息和第二属性信息;
将同一实体的所述第一属性信息和所述第二属性信息比对,以确定相应实体各属性项的属性值更新类型;
对各属性项,根据所述更新类型进行统计,得到属性值属于相应更新类型的实体数量;
根据对属性项统计得到的属于各更新类型的实体数量,生成一致性报告;
所述两版本图谱包括第一图谱和第二图谱,所述将同一实体的所述第一属性信息和所述第二属性信息比对,以确定相应实体各属性项的属性值更新类型之前,还包括:
若同一实体的标识在所述两版本图谱中存在差异,生成所述两版本图谱中标识的变更关系,以根据所述变更关系,修改所述第一图谱或所述第二图谱的标识。
2.根据权利要求1所述的检测方法,其特征在于,所述生成所述两版本图谱中标识的变更关系,以根据所述变更关系,修改所述第一图谱或所述第二图谱的标识,包括:
若所述第一图谱中实体的第一标识变化为所述第二图谱中的第二标识,生成所述第一图谱中的第一标识和所述第二图谱中的第二标识之间的变更关系;
根据所述变更关系,将所述第一图谱中的所述第一标识修改为所述第二标识,或者,将所述第二图谱中的所述第二标识修改为所述第一标识。
3.根据权利要求1所述的检测方法,其特征在于,所述生成不同版本图谱中标识的变更关系,以根据所述变更关系,修改所述第一图谱或所述第二图谱的标识,包括:
若所述第一图谱中第一标识的实体和第二标识的实体融合为所述第二图谱中第一标识的实体,生成所述第一图谱中的第二标识和所述第二图谱中第一标识之间的变更关系;
根据所述第一图谱中的第二标识和所述第二图谱中第一标识之间的变更关系,对所述第二图谱中具有所述第一标识的实体复制属性信息,将复制的属性信息对应实体的标识修改为所述第二标识。
4.根据权利要求1所述的检测方法,其特征在于,所述生成不同版本图谱中标识的变更关系,以根据所述变更关系,修改所述第一图谱或所述第二图谱的标识,包括:
若所述第一图谱中具有第二标识的实体拆分为所述第二图谱中第一标识的实体和第二标识的实体,生成所述第一图谱中的第二标识和所述第二图谱中第一标识之间的变更关系;
根据所述第一图谱中的第二标识和所述第二图谱中第一标识之间的变更关系,对所述第一图谱中具有所述第二标识的实体复制属性信息,将复制的属性信息对应实体的标识修改为所述第一标识。
5.根据权利要求1-4任一项所述的检测方法,其特征在于,所述将同一实体的所述第一属性信息和所述第二属性信息比对之前,还包括:
根据实体的标识,对各版本图谱进行归并分桶处理,以得到各版本图谱的数据桶;其中,每一个版本图谱的数据桶为多个,每一个数据桶与实体的标识对应,用于存储对应实体的属性信息。
6.根据权利要求5所述的检测方法,其特征在于,所述将同一实体的所述第一属性信息和所述第二属性信息比对,包括:
从各版本图谱的数据桶中,获取对应同一标识的数据桶;所述数据桶中存储的属性信息包括多个层级的属性,每一层级属性包括至少一个属性项和对应的属性值;
对所述对应同一标识的数据桶,根据属性层级顺序,对比相应属性层级内的属性项和对应的属性值,得到所述更新类型;
其中,所述更新类型包括属性值增加、属性值减少、属性值修改和维持不变中的一个或多个组合。
7.根据权利要求6所述的检测方法,其特征在于,所述对比相应属性层级内的属性项和对应的属性值之前,还包括:
根据用户设置,确定待比对的属性项。
8.根据权利要求1所述的检测方法,其特征在于,所述根据所述更新类型进行统计,得到属性值属于相应更新类型的实体数量之后,还包括:
获取用户设定的阈值计算策略;
采用所述阈值计算策略,对历史数据中的实体数量进行计算,以确定阈值;
若所述实体数量与所述阈值不匹配,生成提示信息。
该专利技术资料仅供研究查看技术是否侵权等信息,商用须获得专利权人授权。该专利全部权利属于北京百度网讯科技有限公司,未经北京百度网讯科技有限公司许可,擅自商用是侵权行为。如果您想购买此专利、获得商业授权和技术合作,请联系【客服】
本文链接:http://www.vipzhuanli.com/pat/books/201910660233.7/1.html,转载请声明来源钻瓜专利网。





