[发明专利]图像处理方法及相关设备、迁移网络训练方法及相关设备

说明书

本申请实施例公开一种图像处理方法及相关设备、迁移网络训练方法及相关设备，该方法包括：分别提取待处理图像的待处理关键点信息，以及目标风格图像的目标风格关键点信息；通过关键点迁移网络基于目标风格关键点信息对待处理关键点信息包括的待处理关键点进行迁移，得到目标迁移关键点信息；关键点迁移网络是利用原始样本图像，以及至少两种图像风格的风格引导图像进行训练得到的，风格引导图像和原始样本图像包含的脸部不相同；利用待处理关键点信息和目标迁移关键点信息对根据待处理凸显刚得到的待处理三维模型进行调整，得到目标风格的目标三维模型。实施本申请实施例，能够利用多风格通用的关键点迁移网络进行脸部三维重建，实现风格迁移。

技术领域

本申请涉及影像技术领域，具体涉及一种图像处理方法及相关设备、迁移网络训练方法及相关设备。

背景技术

用户可通过智能手机等电子设备上装载的应用程序对拍摄到的图像进行修改。特别是在拍摄人像时，用户可以自行修改人像的色彩、轮廓等。然而，这些修改仅局限于图像细节，难以对图像的整体风格进行修改。

发明内容

本申请实施例公开了一种图像处理方法及相关设备、迁移网络训练方法及相关设备，能够利用多风格通用的关键点迁移网络进行脸部三维重建，实现风格迁移。

本申请实施例公开一种图像处理方法，所述方法包括：分别提取待处理图像包含的脸部的待处理关键点信息，以及提取目标风格图像包含的脸部的目标风格关键点信息；所述目标风格图像的图像风格是所述待处理图像需要迁移的目标风格；通过所述关键点迁移网络基于所述目标风格关键点信息对所述待处理关键点信息包括的待处理关键点进行迁移，得到目标迁移关键点信息；所述关键点迁移网络是利用原始样本图像，以及至少两种图像风格的风格引导图像进行训练得到的，所述风格引导图像和所述原始样本图像包含的脸部不相同；对所述待处理图像中的脸部进行三维重建，得到待处理三维模型；利用所述待处理关键点信息和所述目标迁移关键点信息对所述待处理三维模型进行调整，得到所述目标风格的目标三维模型。

本申请实施例公开一种迁移网络训练方法，所述方法包括：从样本数据中选取原始样本图像和第一风格引导图像；所述样本数据包括所述原始样本图像，以及至少两种不同图像风格的风格引导图像，第一风格引导图像为具备第一风格的图像，所述第一风格为所述至少两种不同图像风格中的任意一种；提取所述原始样本图像包含的脸部的原始关键点信息，以及提取所述第一风格引导图像包含的脸部的第一风格关键点信息；通过待训练的关键点迁移网络基于所述第一风格关键点信息对所述原始关键点信息包括的原始关键点进行迁移，得到样本迁移关键点信息，并根据所述样本迁移关键点信息计算第一迁移损失；根据所述第一迁移损失调整所述关键点迁移网络的参数。

本申请实施例公开一种图像处理装置，包括：第一提取模块，用于分别提取待处理图像包含的脸部的待处理关键点信息，以及提取目标风格图像包含的脸部的目标风格关键点信息；所述目标风格图像的图像风格是所述待处理图像需要迁移的目标风格；第一迁移模块，用于通过所述关键点迁移网络基于所述目标风格关键点信息对所述待处理关键点信息包括的待处理关键点进行迁移，得到目标迁移关键点信息；所述关键点迁移网络是利用原始样本图像，以及至少两种图像风格的风格引导图像进行训练得到的；第一重建模块，用于对所述待处理图像中的脸部进行三维重建，得到待处理三维模型；以及，利用所述待处理关键点信息和所述目标迁移关键点信息对所述待处理三维模型进行形变，得到所述目标风格的目标三维模型。