[发明专利]生成三维虚拟人物的方法、装置、存储介质及家教机

说明书

本公开涉及一种生成三维虚拟人物的方法、装置、存储介质及家教机，从而能够利用一张二维全身图像生成三维虚拟人物，并且生成的三维虚拟人物包括人脸部分和身体部分。该方法包括：获取用户输入的全身图像；通过图像特征提取模型获得全身图像中关键点对应的关键点信息以及全身图像中用户对应的衣着参数，关键点信息包括关键点的序号以及关键点的三维坐标；根据关键点的序号将全身图像的关键点与三维虚拟人物模型中具有相同序号的预设关键点一一对应，并根据关键点的三维坐标调整三维虚拟人物模型中预设关键点的位置，得到候选三维虚拟人物；根据全身图像中用户对应的衣着参数以及候选三维虚拟人物，生成目标三维虚拟人物。

技术领域

本公开涉及计算机图像处理领域，具体地，涉及一种生成三维虚拟人物的方法、装置、存储介质及家教机。

背景技术

随着科技的发展，人们对各种影像资源的要求越来越高，为了给用户营造身临其境的感觉，越来越多的影像资源均使用了三维显示技术，因此三维显示技术得到了空前的发展以及应用。用户在通过电子产品使用例如游戏、教学、唱歌等应用时，希望可以通过建立与用户自身形象高度相似的三维虚拟人物显示在应用界面，以获得身临其境的使用感受。

相关技术中，通常需要拍摄多张多角度的二维人脸照片才能生成三维虚拟人脸，然后将三维虚拟人脸与系统预设的三维虚拟人物模型融合得到全身的三维虚拟人物，最终得到的三维虚拟人物仅脸部与用户相似。

发明内容

本公开的目的是提供一种生成三维虚拟人物的方法、装置、存储介质及家教机，以解决相关技术生成三维虚拟人物需要多张二维人脸照片且只有脸部与用户相似的技术问题。

为了实现上述目的，本公开的第一方面提供一种生成三维虚拟人物的方法，所述方法包括：

获取用户输入的全身图像；

通过图像特征提取模型获得所述全身图像中关键点对应的关键点信息以及所述全身图像中所述用户对应的衣着参数，所述关键点信息包括所述关键点的序号以及所述关键点的三维坐标；

根据所述关键点的序号将所述全身图像的关键点与三维虚拟人物模型中具有相同序号的预设关键点一一对应，并根据所述关键点的三维坐标调整所述三维虚拟人物模型中所述预设关键点的位置，得到候选三维虚拟人物；

根据所述全身图像中所述用户对应的衣着参数以及所述候选三维虚拟人物，生成目标三维虚拟人物。

可选地，所述图像特征提取模型包括图像预处理网络和特征提取网络，所述通过图像特征提取模型获得所述全身图像中关键点对应的关键点信息以及所述全身图像中所述用户对应的衣着参数包括：

将所述全身图像输入到图像特征提取模型，并通过所述图像特征提取模型中的所述图像预处理网络基于至少一种预设图像处理策略对所述全身图像进行图像预处理得到目标图像；

通过所述图像特征模型中的所述特征提取网络对所述目标图像进行特征提取，获得所述全身图像中关键点对应的关键点信息以及所述全身图像中所述用户对应的衣着参数。

可选地，所述通过所述图像特征提取模型中的所述图像预处理层基于至少一种预设图像处理策略对所述全身图像进行图像预处理得到目标图像，包括：

通过所述图像特征提取模型中的所述图像预处理层基于以下至少一种预设图像处理策略对所述全身图像进行图像预处理，得到多个目标子图像：RGB通道分离处理、HSI通道分离处理、YCrCb通道分离处理、灰度处理、直方图均衡化处理和图像锐化处理；

将所述多个目标子图像进行叠加，得到所述目标图像。

可选地，所述特征提取网络的训练过程包括：

获取标注有样本关键点信息以及样本衣着参数的样本图像；