[发明专利]一种基于图卷积网络的知识图谱表示方法在审
申请号: | 202111031752.0 | 申请日: | 2021-09-03 |
公开(公告)号: | CN113849660A | 公开(公告)日: | 2021-12-28 |
发明(设计)人: | 刘泽彬 | 申请(专利权)人: | 武汉大学 |
主分类号: | G06F16/36 | 分类号: | G06F16/36;G06N3/04 |
代理公司: | 北京喆翙知识产权代理有限公司 11616 | 代理人: | 胡文强 |
地址: | 430072 *** | 国省代码: | 湖北;42 |
权利要求书: | 查看更多 | 说明书: | 查看更多 |
摘要: | |||
搜索关键词: | 一种 基于 图卷 网络 知识 图谱 表示 方法 | ||
本发明公开了一种基于图卷积网络的知识图谱表示方法,所述知识图谱表示方法包括以下几个步骤:步骤一:随机初始化关系表示矩阵;步骤二:随机初始化关系聚合权重;步骤三:由关系表示聚合为实体表示;步骤四:利用图卷积将图的结构信息编码入实体表示和关系表示中;步骤五:进行翻译模型优化训练。所述步骤一中,随机初始化关系表示矩阵:设矩阵Er的每一行为知识图谱中的一个关系表示向量,并进行随机初始化,作为关系表示矩阵。该基于图卷积网络的知识图谱表示方法,引入图卷积网络进行图结构的编码,将一定范围内的图结构信息纳入模型考虑范围,能很好的捕获知识图谱中的图结构信息;并且通过用关系表示聚合成实体表示的方法避免了随机初始化实体表示引入的大量噪声。
技术领域
本发明涉及知识图谱相关技术领域,具体为一种基于图卷积网络的知识图谱表示方法。
背景技术
知识图谱将人类知识以结构化的形式表示出来,通常是用图结构来表示现实世界中的实体(entity)和实体间的关系(relation)。其中,实体为图结构中的节点,关系为图结构中的边。由于知识图谱的这种结构化的表示方式,大大提升了计算机系统对人类知识的表达、存储和推理等能力。21世纪以来被广泛地应用到各个领域。深度学习是用计算机模仿人类神经网络对信息的处理方式的一种方法,在21世纪10年代之后在图像处理、自然语言处理等领域取得了重大突破。近些年来,将知识图谱中的知识用深度学习的方法应用到知识检索、知识推理、自动问答等于生产生活紧密结合的领域中,成为了研究热潮并取得了一系列可观成果。而这一系列领域都需要一个基础,那便是知识表示学习。知识表示学习的目标,是在保存知识图谱中的关键信息的前提下,将知识图谱中的实体和关系都表示为稠密的低维实值向量,以便深度学习对其进行下一步的处理。
现有的技术方案为:知识表示学习是近年来的研究热点,多种方法被研究者先后提出,包括:距离模型、单层神经网络模型、能量模型、双线性模型、张量神经网络模型、矩阵分解模型和翻译模型等。其中,与本模型最相近的实现方案为一系列翻译模型。翻译模型中,用r(relation)代表关系向量,用h(head)代表头实体向量,t(tile)代表尾实体向量。翻译模型的优化目标,是使得f(g(h,r),t)最小。其中,g是将(h,r)对映射成尾实体的函数,也即通过头实体和关系预测尾实体的函数,f是距离函数,用来判断预测出的尾实体与真实尾实体之间的距离。翻译模型将h、t、r随机初始化,以f(g(h,r),t)最小化为训练目标进行训练。
传统的知识图谱表示方法通常面临两个问题:
1.基于局部的、三元对之间的特征的训练不能很好的捕获知识图谱中的图结构信息,难以显式地将丰富的图结构信息进行表示;
2.由于训练过程中实体表示和关系表示高度耦合,在训练过程中关系表示会具有很大的由实体表示带来的噪声,使得训练过程中关系的表示向量不稳定。
因此,我们提出一种基于图卷积网络的知识图谱表示方法,以便于解决上述中提出的问题。
发明内容
本发明的目的在于提供一种基于图卷积网络的知识图谱表示方法,以解决上述背景技术中提出的,难以显式地将丰富的图结构信息进行表示;训练过程中关系的表示向量不稳定的问题。
为实现上述目的,本发明提供如下技术方案:一种基于图卷积网络的知识图谱表示方法,所述知识图谱表示方法包括以下几个步骤:
步骤一:随机初始化关系表示矩阵;
步骤二:进行初始化关系聚合权重;
步骤三:由关系表示聚合为实体表示;
步骤四:利用图卷积将图的结构信息编码入实体表示和关系表示中;
步骤五:进行翻译模型优化训练。
优选的,所述步骤一中,随机初始化关系表示矩阵:
该专利技术资料仅供研究查看技术是否侵权等信息,商用须获得专利权人授权。该专利全部权利属于武汉大学,未经武汉大学许可,擅自商用是侵权行为。如果您想购买此专利、获得商业授权和技术合作,请联系【客服】
本文链接:http://www.vipzhuanli.com/pat/books/202111031752.0/2.html,转载请声明来源钻瓜专利网。