[发明专利]图像合成方法和装置

权利要求书

1.一种图像合成方法，包括：

基于所选取的初始人脸图像，确定眼部图像、嘴部图像和所述初始人脸图像中各区域的平均像素值，其中，所述各区域根据对所述初始人脸图像提取的二维关键点划分得到；

基于所获取的表情系数、姿态参数和所述初始人脸图像的基准三维模型，生成所述初始人脸图像的人脸三维模型，其中，所述表情系数用于表征参考人脸图像所指示的参考人脸对象属于预设表情集合中的表情的概率，所述姿态参数用于指示所述参考人脸图像所指示的参考人脸对象的姿态，所述初始人脸图像的基准三维模型包括针对所述预设表情集合中的表情所构造的所述初始人脸图像指示的人脸对象的三维模型；

将所述眼部图像、所述嘴部图像、所述初始人脸图像中各区域的平均像素值和所述初始人脸图像的人脸三维模型中的三维像素点的归一化坐标输入至预先训练的图像合成模型，得到合成人脸图像，其中，所述图像合成模型用于表征眼部图像、嘴部图像、人脸图像中各区域的平均像素值、人脸图像的人脸三维模型中的三维像素点的归一化坐标和合成人脸图像之间的对应关系。

2.根据权利要求1所述的方法，其中，在所述基于所选取的初始人脸图像，确定眼部图像、嘴部图像和所述初始人脸图像中各区域的平均像素值之前，所述方法还包括：

选取通信连接的终端设备发送的用户选取信息所指示的人脸图像作为所述初始人脸图像。

3.根据权利要求2所述的方法，其中，在所述基于所获取的表情系数、姿态参数和所述初始人脸图像的基准三维模型，生成所述初始人脸图像的人脸三维模型之前，所述方法还包括：

接收所述终端设备发送的人脸图像作为所述参考人脸图像；

基于对所述参考人脸图像提取的二维关键点和所获取的所述参考人脸图像的基准三维模型，确定用于生成所述参考人脸图像的人脸三维模型的表情系数和姿态参数；

将所确定的表情系数和姿态参数作为所述所获取的表情系数和姿态参数。

4.根据权利要求1-3中任一所述的方法，其中，所述图像合成模型通过如下步骤训练得到：

获取样本集合，其中，所述样本集合中的样本包括样本人脸图像和对应的样本眼部图像、样本嘴部图像、样本像素值、样本归一化坐标，样本归一化坐标包括样本人脸图像的人脸三维模型中的三维像素点的归一化坐标，样本像素值包括样本人脸图像中各区域的平均像素值，样本人脸图像中各区域根据对样本人脸图像提取的二维关键点划分得到；

将所述样本集合中的样本所包括的样本眼部图像、样本嘴部图像、样本像素值和样本归一化坐标作为初始模型的输入，将与输入的样本眼部图像、样本嘴部图像、样本像素值和样本归一化坐标对应的样本人脸图像作为所述初始模型的期望输出，训练得到所述图像合成模型。

5.根据权利要求2或3所述的方法，其中，所述方法还包括：

基于所述合成人脸图像和从所述初始人脸图像中确定的背景图像，合成目标人脸图像；

将所述目标人脸图像发送至所述终端设备，以使所述终端设备显示所述目标人脸图像。

6.一种图像合成装置，包括：

第一确定单元，被配置成基于所选取的初始人脸图像，确定眼部图像、嘴部图像和所述初始人脸图像中各区域的平均像素值，其中，所述各区域根据对所述初始人脸图像提取的二维关键点划分得到；

生成单元，被配置成基于所获取的表情系数、姿态参数和所述初始人脸图像的基准三维模型，生成所述初始人脸图像的人脸三维模型，其中，所述表情系数用于表征参考人脸图像所指示的参考人脸对象属于预设表情集合中的表情的概率，所述姿态参数用于指示所述参考人脸图像所指示的参考人脸对象的姿态，所述初始人脸图像的基准三维模型包括针对所述预设表情集合中的表情所构造的所述初始人脸图像指示的人脸对象的三维模型；

第一合成单元，被配置成将所述眼部图像、所述嘴部图像、所述初始人脸图像中各区域的平均像素值和所述初始人脸图像的人脸三维模型中的三维像素点的归一化坐标输入至预先训练的图像合成模型，得到合成人脸图像，其中，所述图像合成模型用于表征眼部图像、嘴部图像、人脸图像中各区域的平均像素值、人脸图像的人脸三维模型中的三维像素点的归一化坐标和合成人脸图像之间的对应关系。