[发明专利]一种基于机器视觉的虚拟现实交互系统及方法

说明书

技术领域

本发明涉及一种虚拟现实交互系统，具体涉及一种基于机器视觉的虚拟现实交互系统及方法。

背景技术

虚拟现实技术(Virtual Reality，VR)，是集成计算机图形学、多媒体、人工智能、多传感器、网络和并行处理等技术的一项最新技术，以模拟方式为使用者创造一个实时反映实体对象变化与相互作用的三维图像世界。在视、听、触和嗅等感知行为的逼真体验中，使参与者可以直接参与虚拟对象在所处环境中的作用和变化，令人仿佛置身于一个虚拟世界中，产生身临其境的感觉，即：浸没感(Immersion)。

虚拟现实技术除具有浸没感的特征外，还具有交互性，即：参与者可操纵虚拟环境。为实现参与者和虚拟环境之间交互性，必须跟踪参与者头部和分离部的姿态，现有技术中，采用复杂的外围器件，例如，陀螺仪、加速度计以及旋转向量传感器等，对参与者头部和分离部进行跟踪，因此，既加大了系统成本，又具有跟踪精度有限的问题，从而降低了参与者体验感。

发明内容

针对现有技术存在的缺陷，本发明提供一种基于机器视觉的虚拟现实交互系统及方法，可有效解决上述问题。

本发明采用的技术方案如下：

本发明提供一种基于机器视觉的虚拟现实交互系统，包括：虚拟环境生成控制器(1)、头盔设备(2)和分离部交互系统(3)；

其中，所述头盔设备(2)包括头盔式显示器、固定安装于所述头盔式显示器的第二图像采集设备(2.1)和通信模块；所述第二图像采集设备(2.1)通过所述通信模块与所述虚拟环境生成控制器(1)通信；

所述分离部交互系统(3)包括分离部交互设备(3.1)、固定设置于所述分离部交互设备(3.1)的第二辅助识别模块(3.2)和指令发送器(3.3)；所述分离部交互设备(3.1)通过所述指令发送器(3.3)与所述虚拟环境生成控制器(1)通信；

此外，所述第二图像采集设备(2.1)为摄像机，随着参与者头部运动而运动；所述第二图像采集设备(2.1)用于采集所述第二辅助识别模块(2.2)的图像信息，并将采集到的所述图像信息上传给所述虚拟环境生成控制器(1)。

优选的，还包括头部姿态采集系统；

所述头部姿态采集系统为姿态传感器；或者，所述头部姿态采集系统包括第一图像采集设备(4)和固定设置于所述头盔式显示器的第一辅助识别模块(2.2)；所述第一图像采集设备(4)的数量为至少一个，固定安装于参与者视线的前方、左侧或右侧；当所述第一图像采集设备(4)的数量为两个以上时，形成一个无盲区的采集区域；

所述第一图像采集设备(4)与所述虚拟环境生成控制器(1)通信。

优选的，所述姿态传感器为陀螺仪和/或加速度计和/或磁力计。

优选的，所述第一辅助识别模块(2.2)和所述第二辅助识别模块(3.2)为带特征标记的多面体，所述多面体为四面体、六面体或者球体。

优选的，所述第一辅助识别模块(2.2)为设置于所述头盔式显示器中远离参与者眼部外表面的具有一定规则的纹理图案；所述第二辅助识别模块(3.2)为设置于所述分离部交互设备(3.1)外表面的具有一定规则的纹理图案。

优选的，所述分离部交互设备(3.1)为仿真模型和/或玩具；所述指令发送器(3.3)为所述仿真刀具的手柄，或者，所述指令发送器(3.3)为所述仿真枪具的扳机。

优选的，所述指令发送器(3.3)为有线指令发送器和/或无线指令发送器。

本发明还提供一种基于机器视觉的虚拟现实交互方法，包括以下步骤：

S1，初始时刻，头盔设备(2)固定设置有第二图像采集设备(2.1)以及配有图案和/或人工标记的第一辅助识别模块(2.2)；

在分离部交互设备(3.1)上固定设置有配有图案和/或人工标记的第二辅助识别模块(3.2)；

在参与者视线的前方固定安装第一图像采集设备(4)；