[发明专利]仿真3D数字人交互方法、装置、电子设备及存储介质

说明书

本申请实施例提供了一种仿真3D数字人交互方法、装置、电子设备及存储介质，涉及人机交互技术领域。该方法包括：获取采集装置采集的场景数据；若根据场景数据确定场景内存在目标用户，则处理场景数据以获取目标用户与显示屏的第一相对位置；若目标用户位于预设区域内，则基于预设的仿真数字人模型，获取第一相对位置对应的目标仿真数字人图像，目标仿真数字人图像包括面部朝向目标用户的仿真数字人，预设区域为与显示屏的距离小于预设数值的区域；在显示屏上显示目标仿真数字人图像。本申请实施例可以根据目标用户的位置，生成面部朝向目标用户的逼真的数字人图像，从而实现3D立体的视觉效果，提高了用户的交互体验。

技术领域

本申请涉及人机交互技术领域，更具体地，涉及一种仿真3D数字人交互方法、装置、电子设备及存储介质。

背景技术

近年来，随着科技的进步，智能化的人机交互方式已逐渐成为国内外研究的热点，一些智能设备或者应用中设置有虚拟形象，以通过虚拟形象实现与用户的可视化交互，从而提高用户的人机交互体验。但是当前的大多数场景下，基于虚拟形象的人机交互方式较为单一，不能根据用户位置的改变对显示的虚拟形象进行改变，无法模拟真实环境下的人与人之间的交互状态，用户的交互体验较差。

发明内容

鉴于上述问题，本申请提出了一种仿真3D数字人交互方法、装置、电子设备及存储介质，能够解决上述问题。

第一方面，本申请实施例提供了一种仿真3D数字人交互方法，其特征在于，包括：获取采集装置采集的场景数据；若根据所述场景数据确定场景内存在目标用户，则处理所述场景数据以获取所述目标用户与显示屏的相对位置；若所述目标用户位于预设区域内，则基于预设的仿真数字人模型，获取所述相对位置对应的目标仿真数字人图像，所述目标仿真数字人图像包括面部朝向所述目标用户的仿真数字人，所述预设区域为与所述显示屏的距离小于预设数值的区域；在所述显示屏上显示所述目标仿真数字人图像。

可选地，所述预设的仿真数字人模型为预先根据包含真人模特的多个样本图像和每个所述样本图像对应的参考参数训练得到的模型，所述仿真数字人模型用于根据输入的参考参数，输出所述样本图像对应的仿真数字人图像，所述基于预设的仿真数字人模型，获取所述相对位置对应的目标仿真数字人图像，包括：根据所述相对位置，在预设的多个参考参数中确定目标参考参数，所述参考参数用于表征所述样本图像包含的所述真人模特相对于采集所述样本图像的图像采集装置的位姿；将所述目标参考参数输入所述预设的仿真数字人模型，将输出的仿真数字人图像作为所述目标仿真数字人图像。

可选地，所述根据所述相对位置，在预设的多个参考参数中确定目标参考参数，包括：根据所述相对位置确定用户视角参数，所述用户视角参数用于表征所述目标用户朝向所述显示屏的预设位置的视角；在所述预设的多个参考参数中，根据所述用户视角参数确定所述目标参考参数。

可选地，所述根据所述相对位置确定用户视角参数，包括：根据所述相对位置确定所述显示屏的目标显示位置，所述目标显示位置为所述目标仿真数字人图像在所述显示屏上的显示位置；根据所述相对位置和所述目标显示位置确定所述用户视角参数。

可选地，在所述基于预设的仿真数字人模型，获取所述相对位置对应的目标仿真数字人图像之前，所述方法还包括：获取交互信息；处理所述交互信息以获取应答语音信息；所述将所述目标参考参数输入所述预设的仿真数字人模型，将输出的仿真数字人图像作为所述目标仿真数字人图像，包括：将所述目标参考参数和所述应答语音信息输入所述预设的仿真数字人模型，得到输出的图像序列，所述图像序列由多帧连续的所述目标仿真数字人图像构成；所述在所述显示屏上显示所述目标仿真数字人图像，包括：根据所述图像序列生成并输出仿真数字人的视频，同步播放所述应答语音信息。