[发明专利]基于场景图的图像描述生成方法及装置

摘要

本公开涉及一种基于场景图的图像描述生成方法及装置，所述方法包括：将待处理图像输入场景图生成网络，获得待处理图像中各目标对象的视觉特征向量以及各目标对象之间的关系类别概率分布向量；对关系类别概率分布向量进行权值预测处理，获得各目标对象之间的关系权值向量；对关系权值向量和视觉特征向量进行上下文编码处理，获得各目标对象的物体特征向量；对物体特征向量进行语言解码处理，获得对待处理图像的描述信息。根据本公开的基于场景图的图像描述生成方法，能够利用场景图作为中间表示，能够更加有组织地、结构化地刻画一张图片中的内容，从而生成更加准确和丰富的图像描述。