[发明专利]基于视觉信息和语义属性的电子元器件零样本识别模型及方法

摘要

本发明公开了基于视觉信息和语义属性的电子元器件零样本识别模型及方法，识别模型包括视觉分类网络模型、Skip‑gram模型和CBOW模型，根据电子元器件的视觉特征，设计出可见类以及不可见类电子元器件的语义属性表，使可见类和不可见类之间的语义属性共享。通过将视觉信息和标签的语义属性相结合，利用从文本数据中学习到的标签的语义属性，将语义属性作为监督信号，结合已见类图像训练视觉分类网络，进而实现零样本学习。训练时，通过Skip‑gram模型将可见类转化为语义属性类，使视觉分类网络的训练过程变为共享的语义属性类与输入图像之间的训练。在预测过程中，视觉分类网络预测出共享的语义属性类，CBOW模型将语义属性类转换为类别标签，实现对可见类和不可见类的预测，完成电子元器件零样本识别。