[发明专利]一种多源数据的知识图谱扩展融合方法

说明书

本发明适用于数据处理技术领域，提供了一种多源数据的知识图谱扩展融合方法，包括如下步骤：步骤一、多源数据的采集；步骤二、多源数据的解析抽取；将爬取来每个数据源的数据按照RDF模型进行反向解析，并抽取其中的实体、关系以及属性，随后按照相同的格式进行暂存；步骤三、多源数据的比对整合；将按照相同格式的暂存的多源数据进行实体、关系以及属性的比对，梳理其相关性，并按照相关性进行分组整合；步骤四、与自身数据库的进行对比。本发明在现有的基础上增加了与自身数据库比对的部分，从而可以将外界多源获取的数据，比对整合后，再次与自身数据库中的数据进行比对整合，使得整个数据库中的数据更加的优化，精简。

技术领域

本发明属于数据处理技术领域，尤其涉及一种多源数据的知识图谱扩展融合方法。

背景技术

知识图谱：KnowledgeGraph以结构化的形式描述客观世界中的概念实体及其关系，将互联网的信息表达成更接近人类认知世界的形式，提供了一种更好地组织，管理和理解互联网海量信息的能力。知识图谱与大数据和深度学习一起，成为互联网和人工智能发展的核心驱动力之一。

知识图谱技术是指知识图谱建立和应用的技术，是融合认知计算，知识表示与推理，信息检索与抽取，自然语言处理与语义Web，数据挖掘与机器学习等方向的交叉研究。

2012年google提出知识图谱概念之前其一直以知识工程，语义网等概念存在。在大数据时代，知识工程是从大数据中自动或半自动的获取知识，建立基于知识的系统，我们需要利用知识工程为大数据添加语义知识，使数据产生智慧，完成数据-信息-知识-智慧的转变过程。

知识图谱关注概念，实体及其关系，其中实体是客观世界中的事物，概念是对具有相同属性的事物的概括和抽象。本体是知识图谱的知识表示基础，可以形式化表示为O＝{C，H，P，A，I}，C为概念集合，如事务性概念和事件类概念，Hshi概念的上下位关系集合，P是属性集合，描述概念所具有的特征，A是规则集合，描述领域规则，I是实例集合，描述实例-属性-值。

现有的中文知识图谱方面尚缺乏一个覆盖全面，规模大，质量权威的开放知识图谱，知识分散在多个不同的来源知识库中，如果在实际应用场景下需要一个能满足需求的完整知识库，就不可避免涉及到从多个不同领域不同规模的知识库中提取需要的数据经过融合构成支撑应用所需的完整数据源。另外，但若仅仅采用单一来源的知识作为数据源，知识结构会略显单一，多源数据的融合就可以对多来源知识的不确定性进行修正。

发明内容

本发明提供一种多源数据的知识图谱扩展融合方法，旨在解决若仅仅采用单一来源的知识作为数据源，知识结构会略显单一，多源数据的融合就可以对多来源知识的不确定性进行修正的问题。

本发明是这样实现的，一种多源数据的知识图谱扩展融合方法，包括如下步骤：

步骤一、多源数据的采集；

采用网页爬虫对多个公开或者半公开的数据源中的数据进行采集；

步骤二、多源数据的解析抽取；

将爬取来每个数据源的数据按照RDF模型进行反向解析，并抽取其中的实体、关系以及属性，随后按照相同的格式进行暂存；

步骤三、多源数据的比对整合；

将按照相同格式的暂存的多源数据进行实体、关系以及属性的比对，梳理其相关性，并按照相关性进行分组整合；

步骤四、与自身数据库的进行对比；

当相关性高的分为一组时，直接利用该组相关性的特征与自家数据库中的数据进行遍历比对，再次判断相关性，若相关性高，则与自家数据库中该数据放置在同一组，若相关性不高，则在自家数据库中以该数据的组为中心按照相关度由高到低放置；与自家数据库中该数据放置在同一组，若相关性不高，则在自家数据库中以该数据的组为中心按照相关度由高到低单独成一组放置；