[发明专利]一种基于动态捕捉与全息投影的远程交互方法

摘要

本发明涉及一种基于动态捕捉与全息投影的远程交互方法，属于人机交互领域。在云端存储共享虚拟场景和共享虚拟模型，在用户个人的数据库内存储自定义虚拟场景和虚拟模型，使用光运动捕捉设备进行运动捕捉，使用音频输入设备进行语音捕捉；然后在云端建立逻辑主机管理一级逻辑从机及二级逻辑从机对采集的数据进行处理，最后客户端使用三维全息立体投影技术将接收到的云端处理好的立体场景全息信息投影到空气或者水雾上，实现用户与三维影像的交互。本发明利用运动捕捉和全息投影等技术，将视频通话拓展为远程虚拟交互的裸眼增强现实技术。

主权项

一种基于动态捕捉和全息投影的远程交互方法，其特征在于：包括如下步骤：（一）数据采集1.1在云端存储共享虚拟场景，利用建模软件绘制出模型周围的虚拟场景，在云端提供多种常用模型场景的共享；1.2在云端存储共享虚拟模型，利用建模软件制作出经典的虚拟模型，在云端提供多种常用虚拟模型的共享；1.3在用户个人的数据库内存储自定义虚拟场景，用户自定义的虚拟场景，是通过建模软件建模或者通过照片拍照建模方式建立的场景；1.4在用户个人的数据库内存储自定义虚拟模型，用户自定义的虚拟模型，是通过建模软件建模或者三维人体扫描仪扫描出的目标模型；1.5使用光运动捕捉设备进行运动捕捉，捕捉到精确的骨骼运动数据，骨骼运动数据实时传输到云端以与虚拟模型实时绑定；1.6使用音频输入设备进行语音捕捉，语音数据实时传输到云端以与虚拟模型实时绑定；（二） 数据处理2.1云端建立逻辑主机管理一级逻辑从机；2.2一级逻辑从机调用个人模型数据、骨骼运动数据、场景数据、实时语音进行绑定，并按用户预设处理合成的场景，同时分配三个虚拟摄像机位置：分别是一个观察者视角与两个独立的交互者眼睛视角；2.3一级逻辑从机下设两个二级逻辑从机，用于信息的发送和接收，默认分别用来从两个独立的交互者眼睛视角来观察场景，用户设定观察者视角时，将其对应的二级逻辑从机使用观察者视角；（三）图像呈现客户端使用三维全息立体投影技术将接收到的云端处理好的立体场景全息信息投影到空气或者水雾上，实现用户与三维影像的交互。