[发明专利]数据处理方法、装置、电子设备及存储介质

说明书

本公开实施例公开了一种数据处理方法、装置、电子设备及存储介质，该方法包括：采集与目标用户相关联的音视频帧数据，其中，音视频帧数据中包括待处理语音信息和待处理面部图像；基于目标视线角度调整模型对待处理面部图像进行处理，得到与待处理面部图像相对应的目标面部图像；基于音频内容跟随方法对待处理语音信息跟随处理，确定待处理语音信息在目标文本中所关联的目标语句；将目标语句和目标面部图像分别或同时显示在与目标用户相关联的客户端上。本技术方案，本方案在语音播报过程中不仅可以跟随语音信息，还可以在用户播报过程中，将用户视线聚焦至特定角度，从而提高用户交互体验的效果。

技术领域

本公开实施例涉及计算机技术领域，尤其涉及一种数据处理方法、装置、电子设备及存储介质。

背景技术

在各种播报场景中，都可能使用提词器。提词器可以在演讲者演讲时，为其显示演讲文本。通常，提词器主要是放置在摄像机镜头的前下方，中间有一片透明玻璃或专门的分光镜反射给演讲者，从演讲者方向来的光线穿过玻璃进入镜头，镜头周围的罩子和玻璃背面防止不必要的光线反射进入镜头。

随着互联网技术的发展，每一个视频创作者都可能成为提词器的使用者。但是，传统的提词器存在占地面积大、操作流程复杂以及普适性较差的问题。

发明内容

本公开提供一种数据处理方法、装置、电子设备及存储介质，以实现播报便捷性和普适性的技术效果。

第一方面，本公开实施例提供了一种数据处理方法，该方法包括：

采集与目标用户相关联的音视频帧数据，其中，所述音视频帧数据中包括待处理语音信息和待处理面部图像；

基于目标视线角度调整模型对所述待处理面部图像进行处理，得到与所述待处理面部图像相对应的目标面部图像；

基于音频内容跟随方法对所述待处理语音信息跟随处理，确定所述待处理语音信息在目标文本中所关联的目标语句；

将所述目标语句和所述目标面部图像分别或同时显示在与所述目标用户相关联的客户端上。

第二方面，本公开实施例还提供了一种数据处理装置，该装置包括：

音视频帧数据采集模块，用于采集与目标用户相关联的音视频帧数据，其中，所述音视频帧数据中包括待处理语音信息和待处理面部图像；

面部图像处理模块，用于基于目标视线角度调整模型对所述待处理面部图像进行处理，得到与所述待处理面部图像相对应的目标面部图像；

目标语句确定模块，用于基于预音频内容跟随方法对所述待处理语音信息跟随处理，确定所述待处理语音信息在目标文本中所关联的目标语句；

显示模块，用于将所述目标语句和所述目标面部图像分别或同时显示在与所述目标用户相关联的客户端上。

第三方面，本公开实施例还提供了一种电子设备，所述电子设备包括：

一个或多个处理器；

存储装置，用于存储一个或多个程序，

当所述一个或多个程序被所述一个或多个处理器执行，使得所述一个或多个处理器实现如本公开实施例中任一所述的数据处理方法。

第四方面，本公开实施例还提供了一种包含计算机可执行指令的存储介质，所述计算机可执行指令在由计算机处理器执行时用于执行如本公开实施例任一所述的数据处理方法。

本公开实施例的技术方案，可以采集目标用户的待处理语音信息和待处理面部图像，进而对待处理语音信息和待处理面部图像进行处理，得到目标图像，以及待处理语音信息所对应的目标语句在目标文本中的具体位置，解决了现有技术提词器占用面积较大、使用繁琐复杂，从而导致提词器使用不便的问题，实现了可以基于移动终端就可以进行高效率播报的技术效果。