[发明专利]有纹理的神经化身

摘要

本发明总体上涉及针对变化的人体姿态和相机位置产生人的全身渲染的计算机视觉和计算机图形领域，并且具体地，涉及用于合成人的2D图像的系统和方法。用于合成人的2D图像的方法包括：接收在相机坐标系中定义的人的身体关节位置的3D坐标(S101)，其中，身体关节位置的3D坐标定义人的姿态和2‑D图像的视点；基于身体关节位置的3D坐标使用训练的机器学习预测器来预测身体部位分配的图堆栈和身体部位坐标的图堆栈(S102)，其中，身体部位坐标的图堆栈定义人的身体部位的像素的纹理坐标，身体部位分配的图堆栈定义权重，其中，每个权重指示特定像素属于人的特定身体部位的概率；从存储器读取先前初始化的人的身体部位的纹理的图堆栈(S103)，其中，纹理的图堆栈包括人的身体部位的像素的值；以及通过使用身体部位分配的图堆栈、身体部位坐标的图堆栈和纹理的图堆栈，将人的2‑D图像重建为像素的值的加权组合(S104)。用于合成人的2D图像的系统实现用于合成人的2D图像的方法。