[发明专利]一种虚拟显示方法、设备以及存储介质

说明书

本申请公开了一种虚拟显示方法、设备以及存储介质。该虚拟显示方法包括：基于第二传感器获取目标对象所在的场景图像，基于场景图像生成虚拟形象；基于用户数据更新虚拟空间中的虚拟形象。因此，通过上述方式，可以利用第一传感器获取的用户数据更新基于第二传感器获取的场景图像所生成的虚拟形象，从而能够实现将两个传感器所获取的空间数据进行结合的目的，以丰富场景图像与目标对象的交互效果，提高使用的趣味性。

技术领域

本申请涉及图像处理技术领域，特别是涉及一种虚拟显示方法、设备以及存储介质。

背景技术

增强现实(Augmented Reality)技术是一种将虚拟信息与真实世界进行巧妙融合的技术。其广泛运用了多媒体、三维建模、实时跟踪及注册、智能交互以及传感等多种技术手段。增强现实通过将计算机生成的文字、图像、三维模型、音乐以及视频等虚拟信息进行模拟仿真后，应用到真实世界中，使两种信息互为补充，从而实现对真实世界的“增强”。增强现实技术发展了很多年，希望有一天能在日常生活和工作中能使用该技术，提供生活的便利，提高工作效率等，目前也出现了很多的工作场景，随着技术的进步也有基于视觉高精度地图、信号定位等多传感器融合的全局定位的方法，数字孪生、平行世界等各类科幻的概念逐渐的成为可能。

现有技术中的AR应用均是使用单个的传感器创建AR空间或利用单个的传感器进行人机交互。例如，在一个终端设备上，后置相机主要通过拍摄的实时画面和相关算法构建AR空间，前置摄像头主要用于提供人脸空间，从而对人脸进行算法分析，再叠加AR效果的使用方法，然而，现存的技术方案中并未考虑结合两种AR空间的结合。

发明内容

为了解决现有技术中存在的上述问题，本申请提供了一种虚拟显示方法、设备以及存储介质。

为解决现有技术的中存在的技术问题，本申请提供了一种虚拟显示方法，虚拟显示方法包括：基于第一传感器获取目标对象的用户数据；基于第二传感器获取目标对象所在的场景图像，基于所述场景图像生成虚拟形象；基于所述用户数据更新所述虚拟形象。

其中，所述虚拟显示方法，还包括：从所述场景图像中识别出生物数据；基于所述生物数据生成所述虚拟形象。

因此，通过直接从场景图像中识别生物数据作为生成虚拟形象，能够提高虚拟形象生成的的便捷性，提高虚拟形象的的展示效果。

其中，所述基于所述用户数据更新所述虚拟形象，包括：从所述用户数据中提取第一预设位置的第一特征信息；识别所述虚拟形象上第二预设位置的第二特征信息；将所述第一特征信息与所述第二特征信息进行融合，得到第三特征信息；基于所述第三特征信息更新所述虚拟形象。

因此，可以通过提取的用户数据中的第一预设位置的第一特征信息与提取的第二特征信息进行融合得到第三特征信息，并利用第三特征信息更新虚拟形象，可以提高虚拟形象的展示效果。

其中，所述用户数据包括：用户的人脸关键点；所述基于所述用户数据更新所述虚拟形象，包括：基于所述用户的人脸关键点，更新所述虚拟形象。

因此，通过利用人脸关键点更新虚拟形象，可以提高虚拟形象的展示效果。

其中，所述基于所述用户的人脸关键点，更新所述虚拟形象，包括：基于所述用户的人脸关键点，识别所述用户的人脸表情类型；基于所述人脸表情类型查询对应的虚拟形象ID，显示所述虚拟形象ID的虚拟形象；所述人脸表情类型与所述虚拟形象ID预先绑定。

因此，通过利用人脸关键点查询的虚拟形象更新虚拟形象，能够丰富场景图像与目标对象的交互效果，提高使用的趣味性。

其中，所述基于所述用户数据更新所述虚拟形象，包括：从所述用户数据中识别所述目标对象的人脸特征信息；基于所述人脸特征信息生成所述目标对象的表情信息；基于所述表情信息映射至所述虚拟形象的面部。