[发明专利]图像识别方法和装置、电子设备和计算机存储介质

权利要求书

1.一种图像识别方法，其特征在于，包括：

获取待识别图像的物体候选区、语义标注候选区和短语标注候选区；所述物体候选区用于表征可能存在物体的区域；所述语义标注候选区用于表征包括可识别信息的区域；所述短语标注候选区用于表征存在关联关系的两个物体的区域；

基于所述物体候选区提取初始物体特征信息，基于所述语义标注候选区提取初始语义特征信息，基于所述短语标注候选区提取初始短语特征信息；

基于所述初始物体特征信息、初始语义特征信息和初始短语特征信息之间的连接关系构建动态连接图，基于所述动态连接图分别对所述初始物体特征信息、初始语义特征信息和初始短语特征信息进行修正，得到目标物体特征信息、目标语义特征信息和目标短语特征信息。

2.根据权利要求1所述的方法，其特征在于，所述连接关系包括语义关系及空间关系，所述方法还包括：

基于所述物体候选区和短语标注候选区之间的语义关系，获得所述物体特征信息和短语特征信息之间的连接关系；

基于所述短语标注区和语义标注候选区之间的空间关系，获得所述语义特征信息和短语特征信息之间的连接关系；

其中，所述物体特征信息和短语特征信息之间的连接关系用于表征所述物体特征信息和短语特征信息之间是否存在关联；所述语义特征信息和短语特征信息之间的连接关系用于表征所述语义特征信息和短语特征信息之间是否存在关联。

3.根据权利要求1或2所述的方法，其特征在于，所述获取待识别图像的物体候选区、语义标注候选区和短语标注候选区，包括：

基于卷积神经网络提取待识别图像中每个可能存在物体的区域作为物体候选区，提取待识别图像中每个具有可识别信息的区域作为语义标注候选区；

将所有所述物体候选区进行排列组合，每两个物体候选区结合构成短语标注候选区。

4.根据权利要求3所述的方法，其特征在于，对所述初始物体特征信息、初始语义特征信息和初始短语特征信息进行修正之前，还包括：

将所述初始物体特征信息、初始语义特征信息和初始短语特征信息分别作为物体节点、语义节点和短语节点，将所述初始物体特征信息、初始语义特征信息和初始短语特征信息之间的连接关系作为边，构建动态连接图。

5.根据权利要求4所述的方法，其特征在于，所述构建动态连接图，包括：

对所有所述物体节点进行排列组合，其中，任意两个物体节点组合对应于一个短语节点，基于物体节点与短语节点的关系，将存在关系的两个物体节点与对应该关系的短语节点通过一条边建立连接；

当所述语义标注候选区与所述短语标注候选区重叠部分达到所述短语标注候选区设定比例，将所述语义标注候选区对应的语义节点与所述短语标注候选区对应的短语节点通过一条边建立连接。

6.根据权利要求5所述的方法，其特征在于，所述分别对所述初始物体特征信息、初始语义特征信息和初始短语特征信息进行修正，包括：

所述初始短语特征信息接收通过所述动态连接图中的边传输的初始物体特征信息和初始语义特征信息，基于所述初始物体特征信息和初始语义特征信息对初始短语特征信息进行修正；

所述初始物体特征信息接收通过所述动态连接图中的边传输的初始短语特征信息，基于所述初始短语特征信息对所述初始物体特征信息进行修正；

所述初始语义特征信息接收通过所述动态连接图中的边传输的初始短语特征信息，基于所述初始短语特征信息对所述初始语义特征信息进行修正。