[发明专利]座舱内呈现人脸美妆图像的方法和系统

说明书

本发明提供了一种座舱内呈现人脸美妆图像的方法和系统。方法包括：在UV展开图上获取妆容模板，妆容模板包括一个或多个具有妆容的人脸图像；通过车内摄像头采集座舱内用户的面部图像；基于预先设置或手动选择的操作，通过妆容迁移算法将妆容模板渲染到面部图像中，以获得美妆图像；以及将美妆图像投影在汽车内的前风挡玻璃或侧窗玻璃上。本发明的座舱内呈现人脸美妆图像的方法和系统适于在汽车的场景中实现对人脸图像的美妆处理效果，提升座舱内的智能体验。

技术领域

本发明主要涉及智能汽车领域，尤其涉及一种座舱内呈现人脸美妆图像的方法和系统。

背景技术

随着汽车智能化程度的逐渐升高，人们对于在座舱内的智能驾驶体验有了更高的追求。在其他的领域，如多媒体等，人脸图像自动美妆的技术已经有一些应用，但是在汽车座舱内这一效果尚未被实现。另外，传统的自动美妆技术往往采用2D图像关键点检测，并经过三角剖分的手段对人脸美妆进行妆容迁移，然而，这样的方式存在一些弊端，例如对于侧脸或大角度的美妆迁移时，可能会因为图像的重合或叠加而导致妆容存在异常，尤其是在座舱内的场景中，采用传统的人脸图像自动美妆的方式，会导致最终的美妆效果不稳定或效果较差。

发明内容

本发明要解决的技术问题是提供一种座舱内呈现人脸美妆图像的方法和系统，可以在汽车的场景中实现对人脸图像的美妆处理效果，提升座舱内的智能体验。

为解决上述技术问题，本发明提供了一种座舱内呈现人脸美妆图像的方法，包括：

在UV展开图上获取妆容模板，所述妆容模板包括一个或多个具有妆容的人脸图像；

通过车内摄像头采集座舱内用户的面部图像；

基于预先设置或手动选择的操作，通过妆容迁移算法将所述妆容模板渲染到所述面部图像中，以获得美妆图像；以及

将所述美妆图像投影在汽车内的前风挡玻璃或侧窗玻璃上。

在本发明的一实施例中，任一妆容模板中的每一个像素点与所述任一妆容模板对应的人脸图像转换为三维人脸图像后的三维特征点相对应，在采集所述面部图像之后以及执行所述渲染的步骤之前，还包括：

获取所述面部图像中的二维人脸关键点；

通过三维人脸重建方法获得与所述二维人脸关键点对应的三维人脸关键点，并依据所述三维人脸关键点构建所述面部图像对应的三维人脸图像；

基于预先设置或手动选择的操作，将所述妆容模板渲染到所述用户的面部图像中，其中，所述人脸图图像对应的三维特征点与所述面部头像对应的三维人脸关键点相互对应；以及

将渲染后的面部图像转换为二维的美妆图像。

在本发明的一实施例中，所述妆容迁移算法包括对所述妆容模板和所述三维人脸图像分别进行分层建模，所述分层建模包括构建光照层、细粒度脸部结构层和细粒度皮肤细节层。

在本发明的一实施例中，还包括通过车外摄像头检测位于车辆前方或侧方的行人，并最终将所述美妆图像投影在汽车内的前风挡玻璃或侧窗玻璃的预设区域中，其中，所述预设区域由所述行人位置和所述车内摄像头的位置决定。

在本发明的一实施例中，还包括对所述车内摄像头进行畸变矫正的步骤。

为了解决上述的技术问题，本发明的另一方面还提出了一种座舱内呈现人脸美妆图像的系统，包括：

车内摄像头，适于采集座舱内用户的面部图像；

车机，包括妆容模板获取模块以及妆容渲染模块，其中，所述妆容模板获取模块配置为在UV展开图上获取妆容模板，所述妆容模板包括一个或多个具有妆容的人脸图像；所述妆容渲染模块配置为基于预先设置或手动选择的操作，通过妆容迁移算法将所述妆容模板渲染到所述面部图像中；以及