[发明专利]图像渲染方法、装置、设备和介质有效
| 申请号: | 202310252134.1 | 申请日: | 2023-03-16 |
| 公开(公告)号: | CN115984447B | 公开(公告)日: | 2023-06-23 |
| 发明(设计)人: | 李文娟 | 申请(专利权)人: | 腾讯科技(深圳)有限公司 |
| 主分类号: | G06T15/20 | 分类号: | G06T15/20;G06T17/20;G06V10/54;A63F13/56 |
| 代理公司: | 华进联合专利商标代理有限公司 44224 | 代理人: | 黄晶晶 |
| 地址: | 518057 广东省深圳*** | 国省代码: | 广东;44 |
| 权利要求书: | 查看更多 | 说明书: | 查看更多 |
| 摘要: | |||
| 搜索关键词: | 图像 渲染 方法 装置 设备 介质 | ||
1.一种图像渲染方法,其特征在于,所述方法包括:
将待优化的初始图像输入至图像渲染模型中的头部构建网络,以通过所述头部构建网络基于所述初始图像构建相应的初始头部网格模型;
将所述初始头部网格模型对应的第一纹理信息和所述初始图像对应的第二纹理信息进行融合,得到所述初始头部网格模型的目标纹理信息;所述第一纹理信息用于描述所述初始头部网格模型中三维网格顶点的位置信息;所述第二纹理信息用于描述所述初始图像中目标头部的状态信息;
根据所述目标纹理信息确定所述初始头部网格模型中三维网格顶点的顶点位置偏移量,并将所述顶点位置偏移量输入至所述图像渲染模型中的头部重建网络,以通过所述头部重建网络基于所述顶点位置偏移量对所述初始头部网格模型进行顶点修正,得到目标头部网格模型;
将所述第二纹理信息和所述目标头部网格模型输入至所述图像渲染模型中的渲染网络,以通过所述渲染网络根据所述第二纹理信息和所述目标头部网格模型,生成对所述初始图像优化后的目标图像;所述目标图像中目标头部的细节多于所述初始图像中目标头部的细节。
2.根据权利要求1所述的方法,其特征在于,所述基于所述初始图像构建相应的初始头部网格模型,包括:
从初始图像中提取目标头部的头部特征参数;
基于所述头部特征参数对预设的基准头部网格模型中的三维网格顶点进行调整,得到与所述初始图像相匹配的初始头部网格模型。
3.根据权利要求1所述的方法,其特征在于,所述根据所述目标纹理信息确定所述初始头部网格模型中三维网格顶点的顶点位置偏移量,包括:
针对所述初始头部网格模型中的每一个三维网格顶点,根据所述三维网格顶点对应的目标纹理信息确定所述三维网格顶点的法线;
根据所述三维网格顶点的法线和顶点特征参数,确定所述三维网格顶点对应的顶点位置偏移量。
4.根据权利要求1所述的方法,其特征在于,所述顶点位置偏移量包括所述初始头部网格模型中各三维网格顶点分别对应的顶点坐标偏移量;
所述基于所述顶点位置偏移量对所述初始头部网格模型进行顶点修正,得到目标头部网格模型,包括:
针对所述初始头部网格模型中的每一个三维网格顶点,将所述三维网格顶点的初始坐标与所述三维网格顶点对应的顶点坐标偏移量相加,得到所述三维网格顶点对应的目标坐标;所述初始坐标是所述三维网格顶点位于所述初始头部网格模型的坐标;
根据所述初始头部网格模型中各三维网格顶点分别对应的目标坐标,得到目标头部网格模型。
5.根据权利要求4所述的方法,其特征在于,所述根据所述初始头部网格模型中各三维网格顶点分别对应的目标坐标,得到目标头部网格模型,包括:
根据所述初始头部网格模型中各三维网格顶点分别对应的目标坐标,得到修正后的头部网格模型;
根据相机变换参数对所述修正后的头部网格模型进行变换处理,得到目标头部网格模型;
其中,所述相机变换参数是基于所述初始图像对应的相机位置确定得到的。
6.根据权利要求1所述的方法,其特征在于,所述第二纹理信息包括第二纹理图像;所述根据所述第二纹理信息和所述目标头部网格模型,生成对所述初始图像优化后的目标图像,包括:
通过所述第二纹理图像对所述目标头部网格模型进行贴图处理,得到贴图后的头部网格模型;
对所述贴图后的头部网格模型进行渲染,得到优化后的目标图像。
7.根据权利要求1所述的方法,其特征在于,所述将所述初始头部网格模型对应的第一纹理信息和所述初始图像对应的第二纹理信息进行融合,得到所述初始头部网格模型的目标纹理信息,包括:
将所述初始头部网格模型对应的第一纹理信息和所述初始图像对应的第二纹理信息进行卷积处理,得到卷积后的纹理信息;
将所述卷积后的纹理信息进行池化处理,得到池化后的纹理信息;
将所述池化后的纹理信息进行卷积处理,得到所述初始头部网格模型的目标纹理信息。
该专利技术资料仅供研究查看技术是否侵权等信息,商用须获得专利权人授权。该专利全部权利属于腾讯科技(深圳)有限公司,未经腾讯科技(深圳)有限公司许可,擅自商用是侵权行为。如果您想购买此专利、获得商业授权和技术合作,请联系【客服】
本文链接:http://www.vipzhuanli.com/pat/books/202310252134.1/1.html,转载请声明来源钻瓜专利网。
- 彩色图像和单色图像的图像处理
- 图像编码/图像解码方法以及图像编码/图像解码装置
- 图像处理装置、图像形成装置、图像读取装置、图像处理方法
- 图像解密方法、图像加密方法、图像解密装置、图像加密装置、图像解密程序以及图像加密程序
- 图像解密方法、图像加密方法、图像解密装置、图像加密装置、图像解密程序以及图像加密程序
- 图像编码方法、图像解码方法、图像编码装置、图像解码装置、图像编码程序以及图像解码程序
- 图像编码方法、图像解码方法、图像编码装置、图像解码装置、图像编码程序、以及图像解码程序
- 图像形成设备、图像形成系统和图像形成方法
- 图像编码装置、图像编码方法、图像编码程序、图像解码装置、图像解码方法及图像解码程序
- 图像编码装置、图像编码方法、图像编码程序、图像解码装置、图像解码方法及图像解码程序





