[发明专利]一种人体模型图像的融合处理方法、设备和存储介质

权利要求书

1.一种人体模型图像的融合处理方法，所述方法包括：

1)制作处于初始姿态的三维基础人台，初始姿态参数的获得由基础人台模型的初始化参数确定；

2)获取三维服装模型；

3)将三维服装模型贴合到初始姿态的三维基础人台模型；

4)使用神经网络模型根据目标人体二维图像获取人体模型的二级信息；

5)根据二级信息由神经网络模型回归预测获取目标人体模型的姿态和体型参数，所述三维人体姿态和体型参数与三维基础人台的骨骼和若干个基参数相对应；

6)将获得的若干组基和骨骼参数输入基础人台模型中进行拟合，获得目标姿态和目标体型；

7)驱动人体模型的骨骼从初始姿态向目标姿态移动；

8)获得与目标人体二维图像的姿态相同且完成三维服装模型换装的三维目标人体模型；

9)把图片头像与目标人体模型图像进行融合，处理肢体没有完全对准和对齐的部位；

10)对人体裸露部分的肤色进行还原；

11)得到目标人体头像和四肢，目标图像背景，以及穿在目标人体模型的衣服三部分组成的一张换衣后的2D图片。

2.根据权利要求1所述的方法，其特征在于，所述融合过程还包括：(1)对目标人体二维图像进行人像抠图处理，但保留头部图像；(2)完成换装的三维人体模型，经处理后输出为与所述二维人体图像大小一致的没有任何背景并且去除头部图像的二维图像；(3)将人体模型输出的二维图像叠加在目标二维人体图像上，检查目标人体的头部图像是否与人体模型输出二维图像的颈部吻合一致；(4)如不一致，采用像素融合的方式进行接合部位的拼接处理。

3.根据权利要求2所述的方法，其特征在于，人体模型输出二维图像与原始二维图像头部相连接的部位，根据检测到的人脸肤色进行融合调整；人体模型输出二维图像肢体其他裸露部位，根据原始二维图像中相近部位裸露皮肤的肤色进行融合调整。

4.根据权利要求3所述的方法，其特征在于，抠图后导致所述叠加图像包含像素缺失部分的，根据缺失部分周围一定区域内的背景像素颜色予以填充。

5.根据权利要求1所述的方法，其特征在于，所述驱动过程还包括：采用插帧的方式从初始姿态驱动人体模型骨骼移动到目标姿态；由骨骼的移动带动人体模型网格的跟随移动；驱动服装模型逐帧跟随人体模型移动到目标姿态；服装模型布料解算过程与人体模型网格移动过程同步进行，在所有骨骼完成每一帧的运动后进行布料的物理模拟计算。

6.根据权利要求5所述的方法，其特征在于，在获得骨骼信息的初始状态以及目标姿态状态参数之后，从初始姿态驱动骨骼移动到目标姿态，通过线性插值或最近邻插值的插帧方式，形成初始姿态到目标姿态的骨骼信息时间序列。

7.根据权利要求6所述的方法，其特征在于，生成动画序列的过程中，人体模型网格的移动同样采用插帧的方式进行，每一帧驱动骨骼运动之后，都通过标准人体模特的权重参数计算得到当前状态的人体模型顶点即面信息，更新当前的人体模型网格状态并记录保存。

8.根据权利要求1所述的方法，其特征在于，所述获取目标人体模型的参数的步骤还包括，1)获取目标人体的二维图像；2)处理获得目标人体的二维人体轮廓图像；3)将二维人体轮廓图像代入经过深度学习的第一神经网络进行关节点的回归；4)获得目标人体的关节点图；获取人体各部分语义分割图；身体关键点；身体骨骼点；5)将生成的目标人体的关节点图、语义分割图，身体骨骼点以及关键点信息代入经过深度学习的第二神经网络进行人体姿态和体型参数的回归；6)获得输出的三维人体参数，包括三维人体动作姿态参数和三维人体体型参数。

9.一种计算机可读存储介质，其特征在于，所述计算机可读存储介质内存储有计算机程序，所述计算机程序被处理器执行时实现权利要求1-8任一所述的方法步骤。

10.一种电子设备，其特征在于，包括处理器、通信接口、存储器和通信总线，其中，处理器，通信接口，存储器通过通信总线完成相互间的通信；存储器，用于存放计算机程序；处理器，用于执行存储器上所存放的程序时，实现权利要求1-8任一所述的方法步骤。