[发明专利]基于增强现实的着色方法、装置、电子设备与存储介质在审
申请号: | 201811497751.3 | 申请日: | 2018-12-07 |
公开(公告)号: | CN111292423A | 公开(公告)日: | 2020-06-16 |
发明(设计)人: | 刘享军;杨超;齐坤鹏;高国平 | 申请(专利权)人: | 北京京东尚科信息技术有限公司;北京京东世纪贸易有限公司 |
主分类号: | G06T19/00 | 分类号: | G06T19/00;G06T17/20;G06T15/80 |
代理公司: | 北京同立钧成知识产权代理有限公司 11205 | 代理人: | 罗英;刘芳 |
地址: | 100195 *** | 国省代码: | 北京;11 |
权利要求书: | 查看更多 | 说明书: | 查看更多 |
摘要: | |||
搜索关键词: | 基于 增强 现实 着色 方法 装置 电子设备 存储 介质 | ||
1.一种基于增强现实的着色方法,其特征在于,包括;
获取人脸三维网格信息,并基于所述人脸三维网格信息,获取人脸的目标部位的各顶点的位置坐标和纹理坐标;
根据所述目标部位的各顶点的位置坐标,构建所述目标部位的三维网格,并确定所述三维网格中每个顶点的法线;
基于所述三维网格中每个顶点的位置坐标、纹理坐标、法线,以及所述目标部位预设的明暗贴图、和所述目标部位的目标RGB值,对所述目标部位进行着色。
2.根据权利要求1所述的方法,其特征在于,所述基于所述三维网格中每个顶点的位置坐标、纹理坐标、法线,以及所述目标部位的预设的明暗贴图,和所述目标部位的目标RGB值,对所述目标部位进行着色,包括:
根据所述三维网格中每个顶点的位置坐标、纹理坐标和法线,对每个顶点所在的三角面进行光栅化处理,确定每个三角面中各像素点的位置坐标、纹理坐标和法线;
根据每个所述像素点的位置坐标和纹理坐标,从所述明暗贴图中获取每个像素点对应的灰度值;
根据每个像素点的灰度值和法线、以及所述目标RGB值,对所述每个像素点进行着色。
3.根据权利要求2所述的方法,其特征在于,所述根据每个像素点的灰度值和法线、以及所述目标RGB值,对所述每个像素点进行着色,包括:
根据每个所述像素点的法线、漫反射强度、光线方向和所述目标RGB值,确定每个所述像素点的漫反射颜色值;
根据每个所述像素点的法线和灰度值,以及预设的高光强度、光线方向、视线方向和光滑度系数,确定每个所述像素点的高光颜色;
根据每个所述像素点的漫反射颜色值和所述高光颜色,确定每个所述像素点输出到显示器上的颜色值。
4.根据权利要求3所述的方法,其特征在于,所述根据每个所述像素点的漫反射颜色值和所述高光颜色,确定每个所述像素点输出到显示器上的颜色值,包括:
针对每个像素点,将该像素点的漫反射颜色值和高光颜色之和,作为该像素点输出到显示器上的颜色值。
5.根据权利要求1所述的方法,其特征在于,所述确定所述三维网格中每个顶点的法线,包括:
针对所述三维网格中每个顶点,获取包括该顶点的所有三角形;
确定该顶点在每个三角形上的法线;
根据该顶点在每个三角形上的法线,确定该顶点的法线。
6.根据权利要求5所述的方法,其特征在于,所述根据该顶点在每个三角形上的法线,确定该顶点的法线,包括:
将该顶点在每个三角形上的法线进行相加并归一化处理,获得该顶点的法线。
7.根据权利要求5所述的方法,其特征在于,所述确定该顶点在每个三角形上的法线,包括:
将所述三角形中该顶点所在的两条边的向量进行叉乘计算,确定该顶点在每个三角形上的法线。
8.根据权利要求1-7任一项所述的方法,其特征在于,所述目标部位为唇部,所述目标RGB值为目标唇彩的RGB值。
9.一种基于增强现实的着色装置,其特征在于,包括;
获取模块,用于获取人脸三维网格信息,并基于所述人脸三维网格信息,获取人脸的目标部位的各顶点的位置坐标和纹理坐标;
构建模块,用于根据所述目标部位的各顶点的位置坐标,构建所述目标部位的三维网格;
法线确定模块,用于确定所述三维网格中每个顶点的法线;
着色模块,用于基于所述三维网格中每个顶点的位置坐标、纹理坐标、法线,以及所述目标部位预设的明暗贴图、和所述目标部位的目标RGB值,对所述目标部位进行着色。
该专利技术资料仅供研究查看技术是否侵权等信息,商用须获得专利权人授权。该专利全部权利属于北京京东尚科信息技术有限公司;北京京东世纪贸易有限公司,未经北京京东尚科信息技术有限公司;北京京东世纪贸易有限公司许可,擅自商用是侵权行为。如果您想购买此专利、获得商业授权和技术合作,请联系【客服】
本文链接:http://www.vipzhuanli.com/pat/books/201811497751.3/1.html,转载请声明来源钻瓜专利网。