[发明专利]三维重建方法、装置、设备以及存储介质

权利要求书

1.一种三维重建方法，包括：

根据初始三维人体模型，确定对应的目标二维图像；

对所述目标二维图像进行语义分割，确定所述目标二维图像中各像素点的语义标签；

根据所述初始三维人体模型中的蒙皮顶点与所述目标二维图像中像素点的对应关系，确定各蒙皮顶点的语义标签；

根据各蒙皮顶点的语义标签，确定各蒙皮顶点的目标权重；

根据各目标权重，确定目标三维人体模型；

其中，所述根据各蒙皮顶点的语义标签，确定各蒙皮顶点的目标权重，包括：

根据各蒙皮顶点的语义标签，确定各蒙皮顶点的初始权重；

确定各蒙皮顶点中由关节处的骨骼节点驱动的候选蒙皮顶点；

对所述候选蒙皮顶点的初始权重进行调整，确定各蒙皮顶点的目标权重。

2.根据权利要求1所述的方法，其中，所述对所述目标二维图像进行语义分割，确定所述目标二维图像中各像素点的语义标签，包括：

利用预先训练的二维语义分割网络对所述目标二维图像进行语义分割，确定所述目标二维图像中各像素点的语义标签。

3.根据权利要求1所述的方法，其中，所述根据所述初始三维人体模型中的蒙皮顶点与所述目标二维图像中像素点的对应关系，确定各蒙皮顶点的语义标签，包括：

根据所述初始三维人体模型中的蒙皮顶点与所述目标二维图像中像素点的对应关系，确定蒙皮顶点与像素点的匹配对；

根据所述目标二维图像中各像素点的语义标签，确定每个匹配对的语义标签；

根据所述匹配对的语义标签，确定各蒙皮顶点的语义标签。

4.一种三维重建装置，包括：

图像确定单元，被配置成根据初始三维人体模型，确定对应的目标二维图像；

语义分割单元，被配置成对所述目标二维图像进行语义分割，确定所述目标二维图像中各像素点的语义标签；

标签确定单元，被配置成根据所述初始三维人体模型中的蒙皮顶点与所述目标二维图像中像素点的对应关系，确定各蒙皮顶点的语义标签；

权重确定单元，被配置成根据各蒙皮顶点的语义标签，确定各蒙皮顶点的目标权重；

三维重建单元，被配置成根据各目标权重，确定目标三维人体模型；

其中，所述权重确定单元进一步被配置成：

根据各蒙皮顶点的语义标签，确定各蒙皮顶点的初始权重；

确定各蒙皮顶点中由关节处的骨骼节点驱动的候选蒙皮顶点；

对所述候选蒙皮顶点的初始权重进行调整，确定各蒙皮顶点的目标权重。

5.根据权利要求4所述的装置，其中，所述语义分割单元进一步被配置成：

利用预先训练的二维语义分割网络对所述目标二维图像进行语义分割，确定所述目标二维图像中各像素点的语义标签。

6.根据权利要求4所述的装置，其中，所述标签确定单元进一步被配置成：

根据所述初始三维人体模型中的蒙皮顶点与所述目标二维图像中像素点的对应关系，确定蒙皮顶点与像素点的匹配对；

根据所述目标二维图像中各像素点的语义标签，确定每个匹配对的语义标签；

根据所述匹配对的语义标签，确定各蒙皮顶点的语义标签。

7.一种电子设备，包括：

至少一个处理器；以及

与所述至少一个处理器通信连接的存储器；其中，

所述存储器存储有可被所述至少一个处理器执行的指令，所述指令被所述至少一个处理器执行，以使所述至少一个处理器能够执行权利要求1-3中任一项所述的方法。

8.一种存储有计算机指令的非瞬时计算机可读存储介质，所述计算机指令用于使所述计算机执行权利要求1-3中任一项所述的方法。