[发明专利]服饰检测方法、装置、电子设备、程序和介质

权利要求书

1.一种服饰检测方法，其特征在于，包括：

提取待检测图像中的人体预测关键点；

提取所述待检测图像中的服饰特征；

根据所述服饰特征和所述人体预测关键点进行服饰检测，获得服饰检测结果；

所述根据所述服饰特征和所述人体预测关键点进行服饰检测，包括：

基于所述人体预测关键点生成至少一个备选框，所述备选框用于框定所述待检测图像中的各个人体预测关键点的区域；

根据所述服饰特征和所述至少一个备选框进行服饰检测，输出所述服饰检测结果；所述服饰检测结果包括：服饰位置信息和/或服饰分类信息；

所述提取待检测图像中的人体预测关键点，包括：基于人体关键点网络，获取所述待检测图像中的人体预测关键点；和/或，所述提取所述待检测图像中的服饰特征，包括：基于服饰检测网络，获取所述待检测图像中的服饰特征；

所述根据所述服饰特征和所述至少一个备选框进行服饰检测，包括：

基于所述服饰检测网络，根据所述服饰特征和所述至少一个备选框获取所述待检测图像中的服饰位置信息；

基于服饰分类网络，根据所述服饰特征、服饰位置信息和所述至少一个备选框获取所述待检测图像中的服饰分类信息。

2.根据权利要求1所述的方法，其特征在于，所述人体关键点网络和所述服饰检测网络共享第1至N个卷积层，所述第1至N个卷积层为共享网络层，所述N为大于或等于2的整数。

3.根据权利要求2所述的方法，其特征在于，

所述人体关键点网络包括：共享网络层和关键点检测分支层；

所述共享网络层输出的特征为共享层特征，以所述共享层特征作为人体关键点特征；

所述关键点检测分支层包括M个卷积层，所述M为大于或等于1的整数；

所述关键点检测分支层用于根据所述共享网络层输出的人体关键点特征回归人体关键点的位置，得到所述人体预测关键点。

4.根据权利要求2所述的方法，其特征在于，

所述服饰检测网络包括：共享网络层和服饰检测分支层；

所述共享网络层输出的特征为共享层特征，以所述共享层特征作为所述服饰特征；

所述服饰检测分支层包括：池化层和全连接层；

所述服饰检测分支层用于基于所述人体预测关键点以及所述服饰特征检测所述待检测图像中服饰的位置信息。

5.根据权利要求1所述的方法，其特征在于，所述人体关键点网络、所述服饰检测网络和所述服饰分类网络共享第1至N个卷积层，所述第1至N个卷积层为共享网络层，所述N为大于或等于2的整数。

6.根据权利要求5所述的方法，其特征在于，

所述服饰分类网络包括：共享网络层和服饰分类分支层；所述共享网络层输出的特征为共享层特征，以所述共享层特征作为服饰分类特征；所述服饰分类分支层包括：对齐层、V个卷积层，所述V为大于或等于1的整数；所述服饰分类分支层用于基于所述服饰检测结果以及所述服饰分类特征检测所述待检测图像中的服饰的分类信息。

7.根据权利要求6所述的方法，其特征在于，所述人体预测关键点包括以下至少一个：左肩点、左臂点、左手点、右肩点、右臂点、右手点、左腰点、右腰点、左膝点、左脚点、右膝点、右脚点。

8.根据权利要求7所述的方法，其特征在于，所述至少一个备选框包括以下至少一个：

左右两肩点和腰部两点的最小长方形；

左右两肩点和左右膝盖点的最小长方形；

腰部两点和左右膝盖点的最小长方形；

腰部两点和左右脚点的最小长方形；

左右两肩点和左右脚点的最小长方形。

9.根据权利要求1所述的方法，其特征在于，还包括：

利用第一样本图像对实现所述服饰检测方法的服饰检测网络和人体预测关键点进行训练；所述第一样本图像标注有人体关键点特征和服饰特征。