[发明专利]纹理贴图的生成方法和装置、电子设备和存储介质

说明书

本申请提供了一种纹理贴图的生成方法和装置、电子设备和存储介质，其中，该方法包括：获取目标用户在多个角度下对应生成的色彩图和深度图；利用色彩图和深度图对目标用户的三维头部形状进行重建，得到目标用户的目标三维头部形状；利用目标三维头部形状和色彩图，生成纹理贴图。通过本申请，解决了相关技术中存在生成的用户三维形象对应的贴图纹理较不清晰，不能体现用户的纹理真实状况的问题。

技术领域

本申请涉及图片处理领域，尤其涉及一种纹理贴图的生成方法和装置、电子设备和存储介质。

背景技术

目前，在基于单张图片的三维头部重建任务中，往往利用生成对抗网络根据输入图片生成对应的纹理贴图，这种方式虽然可以保留输入人脸的个性化特征，但生成的图像较为模糊，未能准确表达出用户的三维形象。

因此，相关技术中存在生成的用户三维形象对应的贴图纹理较不清晰，不能体现用户的纹理真实状况的问题。

发明内容

本申请提供了一种纹理贴图的生成方法和装置、电子设备和存储介质，以至少解决相关技术中存在生成的用户三维形象对应的贴图纹理较不清晰，不能体现用户的纹理真实状况的问题。

根据本申请实施例的一个方面，提供了一种纹理贴图的生成方法，该方法包括：

获取目标用户在多个角度下对应生成的色彩图和深度图；

利用所述色彩图和所述深度图对所述目标用户的三维头部形状进行重建，得到所述目标用户的目标三维头部形状；

利用所述目标三维头部形状和所述色彩图，生成纹理贴图。

根据本申请实施例的另一个方面，还提供了一种纹理贴图的生成装置，该装置包括：

获取单元，用于获取目标用户在多个角度下对应生成的色彩图和深度图；

第一得到单元，用于利用所述色彩图和所述深度图对所述目标用户的三维头部形状进行重建，得到所述目标用户的目标三维头部形状；

生成单元，用于利用所述目标三维头部形状和所述色彩图，生成纹理贴图。

可选地，第一得到单元包括：

第一得到模块，用于根据所述色彩图和所述深度图，得到所述目标用户的初始三维头部形状；

渲染模块，用于在目标角度下利用身份向量和表情向量渲染所述初始三维头部形状，得到渲染后的在所述目标角度下的参考深度图，其中，所述身份向量和所述表情向量用于描述所述目标用户的身份维度系数和表情维度系数；

第二得到模块，用于利用所述色彩图、所述深度图和所述参考深度图，得到所述目标三维头部形状。

可选地，第二得到模块包括：

确定子单元，用于利用所述色彩图、所述深度图以及所述参考深度图，确定误差值；

比较子单元，用于将所述误差值与第一阈值进行比较，其中，所述第一阈值为停止所述误差值与所述第一阈值进行循环比较的临界值；

得到子单元，用于在所述误差值小于所述第一阈值的情况下，得到所述目标三维头部形状。

可选地，确定子单元包括：

检测子模块，用于检测所述色彩图上的关键点；

获取子模块，用于获取所述关键点在所述色彩图上的第一关键点坐标、获取所述关键点在所述目标三维头部形状对应的三维图像上的第二关键点坐标以及获取所述第二关键点坐标利用映射函数映射到二维图像上的第三关键点坐标；