[发明专利]虚拟形象驱动方法、装置、设备和介质

说明书

本发明实施例公开了一种虚拟形象驱动方法、装置、设备和介质。该方法包括：实时获取直播视频帧中的人脸图像；基于深度学习的方式识别与所述人脸图像对应的表情基底系数；其中，所述表情基底系数是与预设的目标虚拟形象表情基组匹配的；将所述表情基底系数使用到所述目标虚拟形象表情基组上，以驱动与所述目标虚拟形象表情基组对应的虚拟形象的表情。上述技术方案在应用深度学习技术的基础上，只需要廉价的摄像头实时采集直播图像，即可实现人脸图像对虚拟形象表情的驱动，无需专业设备，以此降低了驱动虚拟形象进行个性化实时直播的成本。

技术领域

本发明实施例涉及计算机视觉领域，尤其涉及一种虚拟形象驱动方法、装置、设备和介质。

背景技术

随着直播行业的流行，越来越多的人作为主播进入了直播行业。但是往往会面临一些问题，比如主播对自己的形象可能不够自信，担心直接将真实容貌暴露在直播环境之中会对直播效果产生影响，又比如主播总是以单一的自我形象进行直播，缺少多样性，限制了许多有趣的直播模式和玩法。虚拟直播应运而生，让主播可以在背后驱动虚拟形象进行个性化直播。

目前，有些主播采用AR(Augmented Reality，增强现实)技术驱动虚拟形象进行个性化直播，但AR设备的成本较高，无法推广使用。因此，如何降低驱动虚拟形象进行个性化实时直播的成本是亟待解决的问题。

发明内容

本发明实施例提供一种虚拟形象驱动方法、装置、设备和介质，以实现对虚拟形象表情的实时驱动，降低对专业设备的需求。

第一方面，本发明实施例提供了一种虚拟形象驱动方法，包括：

实时获取直播视频帧中的人脸图像；

基于深度学习的方式识别与所述人脸图像对应的表情基底系数；其中，所述表情基底系数是与预设的目标虚拟形象表情基组匹配的；

将所述表情基底系数使用到所述目标虚拟形象表情基组上，以驱动与所述目标虚拟形象表情基组对应的虚拟形象的表情。

第二方面，本发明实施例还提供了一种虚拟形象驱动装置，包括：

人脸图像实时获取模块，用于实时获取直播视频帧中的人脸图像；

人脸表情识别模块，用于基于深度学习的方式识别与所述人脸图像对应的表情基底系数；其中，所述表情基底系数是与预设的目标虚拟形象表情基组匹配的；

虚拟形象驱动模块，用于将所述表情基底系数使用到所述目标虚拟形象表情基组上，以驱动与所述目标虚拟形象表情基组对应的虚拟形象的表情。

第三方面，本发明实施例还提供了一种计算机设备，所述计算机设备包括：

一个或多个处理器；

存储器，用于存储一个或多个程序，

当所述一个或多个程序被所述一个或多个处理器执行，使得所述一个或多个处理器实现任意实施例所述的虚拟形象驱动方法。

第四方面，本发明实施例还提供了一种计算机可读存储介质，其上存储有计算机程序，该程序被处理器执行时实现任意实施例所述的虚拟形象驱动方法。

在本发明实施例提供的技术方案中，针对实时获取到的直播视频帧中的人脸图像，基于深度学习的方式进行表情基底系数的识别，并将识别到的表情基底系数使用到相应的目标虚拟形象表情基组上，以实现对相应的虚拟形象的表情驱动。该技术方案在应用深度学习技术的基础上，只需要廉价的摄像头实时采集直播图像，即可实现人脸图像对虚拟形象表情的驱动，无需专业设备，以此降低了驱动虚拟形象进行个性化实时直播的成本。

附图说明

图1是本发明实施例一提供的一种虚拟形象驱动方法的流程图；

图2是本发明实施例一提供的目标虚拟形象表情基组的示意图；