[发明专利]低俗图像的识别方法、装置、设备及计算机可读存储介质

权利要求书

1.一种低俗图像的识别方法，其特征在于，所述方法包括：

获取待识别图像、及所述待识别图像关联的上下文信息；

分别对所述待识别图像及所述上下文信息进行特征提取，得到图像特征及上下文特征；

基于所述图像特征及上下文特征，对所述待识别图像进行分类，得到所述待识别图像所属的类别；

确定所述待识别图像的图像场景，并基于所述类别及所述图像场景确定所述待识别图像的低俗识别结果。

2.如权利要求1所述的方法，其特征在于，所述获取待识别图像，包括

获取待识别视频；

从所述待识别视频中，抽取至少一个关键帧作为待识别图像；

相应的，所述基于所述类别及所述图像场景确定所述待识别图像的低俗识别结果之后，所述方法还包括：

将所述待识别图像的低俗识别结果，作为所述待识别视频的低俗识别结果。

3.如权利要求1所述的方法，其特征在于，获取所述待识别图像关联的上下文信息，包括：

获取所述待识别图像关联的文本信息，所述文本信息包括所述待识别图像的标题信息、标签信息、文本描述信息中至少之一；

将获取的所述待识别图像关联的文本信息，作为所述待识别图像关联的上下文信息。

4.如权利要求1所述的方法，其特征在于，获取所述待识别图像关联的上下文信息，包括：

当所述待识别图像为视频中的帧图像时，获取所述视频的内容描述信息；

将所述视频的内容描述信息作为所述待识别图像的上下文信息。

5.如权利要求1所述的方法，其特征在于，对所述待识别图像进行特征提取，得到图像特征及上下文特征，包括：

获取预训练得到的用于对所述待识别图像进行分类的图像分类模型；

获取所述图像分类模型对所述待识别图像分类的过程中，所述图像分类模型的中间层输出的特征向量，作为所述待识别图像的图像特征。

6.如权利要求1所述的方法，其特征在于，对所述上下文信息进行特征提取，得到上下文特征，包括：

当所述上下文信息为文本时，对所述文本进行分词处理，得到至少两个词；

通过词向量模型对所述至少两个词进行编码，得到各个词对应的编码特征；

对所述各个词对应的编码特征进行特征拼接，得到所述上下文特征。

7.如权利要求1所述的方法，其特征在于，所述对所述待识别图像进行特征提取，得到图像特征，包括：

当待识别图像的数量为至少两个时，分别对各所述待识别图像进行特征提取，得到对应各所述待识别图像的特征；

对至少两个所述待识别图像的特征进行特征融合，得到所述图像特征。

8.如权利要求1所述的方法，其特征在于，所述基于所述图像特征及上下文特征，对所述待识别图像进行分类，得到所述待识别图像所属的类别，包括：

对所述图像特征及所述上下文特征进行拼接，得到拼接特征；

基于所述拼接特征，对所述待识别图像进行多标签分类，得到所述待识别图像所属的至少一个类别。

9.如权利要求1所述的方法，其特征在于，所述基于所述图像特征及上下文特征，对所述待识别图像进行分类，得到所述待识别图像所属的类别，包括：

对所述图像特征及所述上下文特征进行拼接，得到拼接特征，并将所述拼接特征输入多标签分类模型；

通过所述多标签分类模型的编码层，对所述拼接特征进行编码，得到相应的编码特征；

通过所述多标签分类模型的分类预测层，对所述编码特征进行分类预测，得到所述待识别图像所属的至少一个类别。