[发明专利]增强现实特效的渲染方法、装置、介质及设备

说明书

本公开的实施例提供了一种增强现实特效的渲染方法、装置、计算机可读介质及终端设备，涉及计算机技术领域；包括：获取主播直播视频流，根据直播视频流识别得到主播的人体特征数据，同时提取视频流画面参数；基于人体特征数据和触发增强现实特效时产生的特效数据，得到触发场景数据，其中所述特效数据至少包括特效类型和特效触发时间；根据触发场景数据和人体特征数据，预测增强现实特效在直播视频流中的渲染位置；根据人体特征数据、视频流画面参数和渲染位置，在显示界面上渲染增强现实特效。实施本公开实施例的技术方案，可以提高增强现实渲染的准确度和渲染效率。

技术领域

本公开涉及计算机技术领域，具体而言，涉及一种增强现实特效的渲染方法、增强现实特效的渲染装置、计算机可读介质及终端设备。

背景技术

随着计算机技术的发展，人们开始使用增强现实技术，通过在真实画面的上叠加虚拟对象，令视频画面信息可以更加丰富。

以直播为例，直播中存在大量增强现实特效，如赠送虚拟礼物。在增强现实特效的叠加中，应将特效渲染到画面的合适位置。目前的方案，通过获取直播视频，对当前视频画面进行视觉识别得到适于当前视频画面的渲染位置，再渲染特效。由于存在识别响应延迟导致渲染时间不同步和渲染位置不准确，影响特效渲染质量和效率。

需要说明的是，在上述背景技术部分公开的信息仅用于加强对本公开的背景的理解，因此可以包括不构成对本领域普通技术人员已知的现有技术的信息。

发明内容

本公开实施例的目的在于提供一种增强现实特效的渲染方法、增强现实特效的渲染装置、计算机可读介质及终端设备，可以提高增强现实渲染的准确度和渲染效率。

本公开实施例的第一方面提供了一种增强现实特效的渲染方法，包括：

获取主播直播视频流，根据所述直播视频流识别得到主播的人体特征数据，同时提取视频流画面参数；

基于所述人体特征数据和触发增强现实特效时产生的特效数据，得到触发场景数据，其中所述特效数据至少包括特效类型和特效触发时间；

根据所述触发场景数据和所述人体特征数据，预测所述增强现实特效在所述直播视频流中的渲染位置；

根据所述人体特征数据、所述视频流画面参数和所述渲染位置，在所述显示界面上渲染增强现实特效。

在本公开的一种示例性实施例中，根据所述触发场景数据和所述人体特征数据，预测所述增强现实特效在所述直播视频流中的渲染位置，包括：

将所述触发场景数据和所述人体特征数据输入预设算法，得到所述增强现实特效的预测渲染位置权值，根据所述权值确定在所述直播视频流中的渲染位置。

在本公开的一种示例性实施例中，在将所述触发场景数据和所述人体特征数据输入预设算法，得到所述增强现实特效的预测渲染位置权值步骤之后，还包括：

根据所述特效类型，对所述预测渲染位置权值进行调节。

在本公开的一种示例性实施例中，获取主播直播视频流，根据所述直播视频流识别得到主播的人体特征数据，同时提取视频流画面参数，包括：

对直播视频流画面进行人脸识别和人体识别，得到人体特征数据包括人脸数据和遮罩数据，读取所述直播视频流得到视频流画面参数.

在本公开的一种示例性实施例中，将所述触发场景数据和所述人体特征数据输入预设算法，得到所述增强现实特效的预测渲染位置权值，包括：

将触发增强现实特征时的触发场景数据和人体特征数据输入评价函数，计算所对应的预测渲染位置权值；

通过强化学习算法更新所述预测渲染位置权值，输出所述更新后的预测渲染位置权值。