[发明专利]数据一致性的检测方法、装置和计算机设备有效
| 申请号: | 201910660233.7 | 申请日: | 2019-07-22 |
| 公开(公告)号: | CN110377704B | 公开(公告)日: | 2022-04-22 |
| 发明(设计)人: | 刘盼;郭方园;蒋雨倩;晋小玲;邝智杰 | 申请(专利权)人: | 北京百度网讯科技有限公司 |
| 主分类号: | G06F16/33 | 分类号: | G06F16/33;G06F16/36 |
| 代理公司: | 北京清亦华知识产权代理事务所(普通合伙) 11201 | 代理人: | 石茵汀 |
| 地址: | 100085 北京市*** | 国省代码: | 北京;11 |
| 权利要求书: | 查看更多 | 说明书: | 查看更多 |
| 摘要: | |||
| 搜索关键词: | 数据一致性 检测 方法 装置 计算机 设备 | ||
本申请提出一种数据一致性的检测方法、装置和计算机设备,其中,方法包括:获取两版本图谱,确定各实体在两版本图谱中的第一属性信息和第二属性信息;将同一实体的第一属性信息和第二属性信息比对,以确定相应实体各属性项的属性值更新类型;对各属性项,根据更新类型进行统计,得到属性值属于相应更新类型的实体数量;根据对属性项统计得到的属于各更新类型的实体数量,生成一致性报告。该方法能够实现丰富一致性报告的展示内容,便于测试人员阅读该一致性报告。
技术领域
本申请涉及互联网技术领域,尤其涉及一种数据一致性的检测方法、装置和计算机设备。
背景技术
知识图谱(Knowledge Graph)是一种揭示实体之间关系的语义网络,可对现实世界的事物及其相互关系进行形式化地描述。知识图谱作为结构化的语义知识库,其基本组成单元为“实体-关系-实体”(SPO)的三元组,以及实体及其相关属性-值对,通过实体间的关系构成网状的知识结构。目前,在互联网信息检索中,知识图谱可以应用于多个领域,拥有海量的数据。因此,如何保证知识图谱数据的准确性,检测图谱数据更新前后的一致性至关重要。
相关技术中,通过以下步骤检测图谱数据更新前后的一致性:(1)标记实体,通常采用md5或实体id唯一标记Base集合和Dev集合中的同一实体;(2)数据排序,针对Base集合和Dev集合,按照标记的字符串顺序对实体数据进行排序;(3)数据融合,将两个集合按照标记分组,增加或者减少的实体组中只包含一条数据;(4)数据对比,逐组进行对比,首先判断两条数据字符串是否相同,若相同则跳过,若不相同则进行单个属性的多层级对比,最终返回变化的属性列表(list);(5)产出报告,以实体为粒度,提供变化属性list以及详细的实体数据对比页面,其中,变化内容通过颜色标记。由此,测试人员可以通过阅读报告,查看增加(ADD)、减少(DEl)、变化(DIFF)实体。
然而这种检测方式,产出的报告内容较为简单,仅展示了实体粒度的变化属性。
发明内容
本申请提出一种数据一致性的检测方法、装置和计算机设备,以实现丰富一致性报告的展示内容,便于测试人员阅读该一致性报告,用于解决现有技术中产出的一致性报告内容较为简单,仅展示了实体粒度的变化属性的技术问题。
本申请第一方面实施例提出了一种数据一致性的检测方法,包括:
获取两版本图谱,确定各实体在所述两版本图谱中的第一属性信息和第二属性信息;
将同一实体的所述第一属性信息和所述第二属性信息比对,以确定相应实体各属性项的属性值更新类型;
对各属性项,根据所述更新类型进行统计,得到属性值属于相应更新类型的实体数量;
根据对属性项统计得到的属于各更新类型的实体数量,生成一致性报告。
本申请实施例的数据一致性的检测方法,通过获取两版本图谱,确定各实体在两版本图谱中的第一属性信息和第二属性信息,之后,将同一实体的第一属性信息和第二属性信息比对,以确定相应实体各属性项的属性值更新类型,接着,对各属性项,根据更新类型进行统计,得到属性值属于相应更新类型的实体数量,最后,根据对属性项统计得到的属于各更新类型的实体数量,生成一致性报告。由此,生成的一致性报告中可以包括实体各属性项的属性值更新类型,以及各更新类型对应的实体数量,可以丰富一致性报告的展示内容,便于测试人员阅读该一致性报告。
本申请第二方面实施例提出了一种数据一致性的检测装置,包括:
获取模块,用于获取两版本图谱,确定各实体在所述两版本图谱中的第一属性信息和第二属性信息;
比对模块,用于将同一实体的所述第一属性信息和所述第二属性信息比对,以确定相应实体各属性项的属性值更新类型;
统计模块,用于对各属性项,根据所述更新类型进行统计,得到属性值属于相应更新类型的实体数量;
该专利技术资料仅供研究查看技术是否侵权等信息,商用须获得专利权人授权。该专利全部权利属于北京百度网讯科技有限公司,未经北京百度网讯科技有限公司许可,擅自商用是侵权行为。如果您想购买此专利、获得商业授权和技术合作,请联系【客服】
本文链接:http://www.vipzhuanli.com/pat/books/201910660233.7/2.html,转载请声明来源钻瓜专利网。





