[发明专利]物体间关系识别设备、学习模型、识别方法和计算机可读介质

摘要

本发明涉及物体间关系识别设备、学习模型、识别方法和计算机可读介质。一种物体间关系识别设备，包括：第一学习装置，其接收图像并且输出图像的第一特征量；第二学习装置，其接收第一特征量并输出第二特征量，并且具有在预定步长内保持内部状态的多个存储单元；三元组部，其具有多个三元组‑单元，该三元组‑单元接收第二特征量并识别第一至第三要素，并且三元组部由输出概率信息的第一至第三识别单元构成。三元组部基于从各个三元组部的第一至第三识别单元输出的第一至第三要素的概率信息，从各个三元组部输出的第一至第三要素的组合中选择第一至第三要素的至少一个组合，并且识别并输出该组合作为物体之间的关系。

主权项

1.一种物体间关系识别设备，所述物体间关系识别设备被配置为基于将图像和在所述图像中包括的物体之间的多个关系相关联的学习数据进行学习，并且使用学习结果来识别和输出在所述图像中包含的物体之间的所述关系，所述设备包括：第一学习装置，所述第一学习装置被配置为接收所述图像并且输出指示所述图像的特征的第一特征量；第二学习装置，所述第二学习装置被配置为接收从所述第一学习装置输出的所述第一特征量并且输出维数比所述第一特征量低的第二特征量，并且所述第二学习装置包括多个存储单元，所述多个存储单元在预定步长内保持内部状态；以及三元组部，所述三元组部包括多个三元组‑单元，所述三元组‑单元被连接至所述第二学习装置的每个存储单元、接收从每个所述存储单元输出的所述第二特征量、由第一识别单元至第三识别单元构成、并且分别输出第一要素至第三要素的组合，所述第一识别单元至所述第三识别单元基于输入的所述第二特征量分别识别所述第一要素至所述第三要素、输出所述第一要素至所述第三要素的概率信息，其中，所述三元组部基于从每个所述三元组‑单元的所述第一识别单元至所述第三识别单元输出的所述第一要素至所述第三要素的所述概率信息，来从自每个所述三元组‑单元输出的所述第一要素至所述第三要素的组合中选择所述第一要素至所述第三要素的至少一个组合，并且识别并输出所选择的第一要素至所述第三要素的组合，作为在所述图像中包含的物体之间的所述关系。