[发明专利]一种直播视频生成方法及装置

说明书

本发明实施例提供了一种直播视频生成方法及装置，涉及视频处理技术领域。包括：实时获取实体对象的第一特征数据；实体对象包括：躯干、大臂、肘关节以及小臂，第一特征数据用于表征小臂的多个部位围绕轴线方向的转动角度，小臂的多个部位围绕轴线方向的转动角度与小臂的多个部位到实体对象的肘关节的距离正相关；基于实时获取的第一特征数据控制虚拟模型的小臂蒙皮的多个部位围绕轴线方向的转动角度，小臂蒙皮的多个部位围绕轴线方向的转动角度与小臂蒙皮的多个部位到虚拟模型的肘关节的距离正相关；根据虚拟模型进行直播视频的图像帧的生成。本发明实施例用于解决现有虚拟直播方式生成的直播视频中虚拟模型的动作不自然的问题。

技术领域

本发明涉及视频处理技术领域，尤其涉及一种直播视频生成方法及装置。

背景技术

近年来，随着流媒体技术的进步以及网络带宽的飞速增长，直播业务日趋火热，直播平台也已成为时下最为热门的娱乐媒体之一。

随着直播形式的丰富，现有技术中提出了虚拟直播的直播方式。虚拟直播可以通过3D建模和实时动作捕捉将实体对象的动作实时同步到虚拟模型上，从而使主播侧用户可以通过虚拟模型的形象进行直播，极大提升了直播的灵活性。现有技术中将实体对象的动作同步到虚拟模型上的方式为：使用简单重定向技术将实体对象的动作迁移到虚拟模型上。然而，这种动作同步方式仅能够使虚拟模型在整体姿势与实体对象同步，无法对动作细节也进行同步，从而导致直播视频中虚拟模型的动作很不自然。

发明内容

有鉴于此，本发明提供了一种直播视频生成方法及装置，用于解决现有虚拟直播方式生成的直播视频中虚拟模型的动作不自然的问题。

为了实现上述目的，本发明实施例提供技术方案如下：

第一方面，本发明的实施例提供一种直播视频生成方法，包括：

实时获取实体对象的第一特征数据；所述实体对象包括：躯干、通过肩关节与所述躯干连接的大臂以及通过肘关节与所述大臂连接的小臂，所述第一特征数据用于表征所述小臂的多个部位围绕轴线方向的转动角度，所述小臂的多个部位围绕轴线方向的转动角度与所述小臂的多个部位到所述实体对象的肘关节的距离正相关；

基于实时获取的所述第一特征数据控制虚拟模型的小臂蒙皮的多个部位围绕轴线方向的转动角度，所述虚拟模型包括：躯干、通过肩关节与所述躯干连接的大臂以及通过肘关节与所述大臂连接的小臂，所述小臂蒙皮覆盖于所述虚拟模型的小臂的外表面，所述小臂蒙皮的多个部位围绕轴线方向的转动角度与所述小臂蒙皮的多个部位到所述虚拟模型的肘关节的距离正相关；

根据所述虚拟模型进行直播视频的图像帧的生成。

作为本发明实施例一种可选的实施方式，所述虚拟模型的小臂包括：主骨骼、套接于所述主骨骼上的多段附加骨骼以及覆盖于所述多段附加骨骼上的所述小臂蒙皮；

所述基于实时获取的所述第一特征数据控制虚拟模型的小臂蒙皮的多个部位围绕轴线方向的转动角度，包括：

基于实时获取的所述第一特征数据控制所述多段附加骨骼中的至少一段附加骨骼围绕所述主骨骼转动，以驱动所述小臂蒙皮围绕轴线方向转动。

作为本发明实施例一种可选的实施方式，所述根据所述虚拟模型进行直播视频的图像帧的生成，包括：

确定所述图像帧对应的镜头方位，所述镜头方位用于表征用于所述图像帧对应的虚拟镜头与所述虚拟模型的位置关系；

根据所述图像帧对应的镜头方位和所述虚拟模型，进行所述图像帧的生成。

作为本发明实施例一种可选的实施方式，所述确定所述图像帧对应的镜头方位，包括：

显示镜头控件，所述镜头控件用于进行镜头方位的选择；

响应于用户对所述镜头控件的操作，确定所述图像帧对应的镜头方位。