[发明专利]沉浸式互动全景全息剧院演出系统、方法及应用

摘要

本发明提供一种沉浸式互动全景全息剧院演出系统、方法及应用，该演出系统采用全息投影的方式在舞台上投影虚拟角色，设置实时动作捕捉装置实时捕捉动作捕捉演员的动作和表情，绑定动作捕捉人员和虚拟角色，从而使得虚拟角色可根据动作捕捉人员的变化而变化；且设置互动装置，动作捕捉演员可通过互动装置和观众进行互动，反馈为虚拟角色和观众的互动，达到真人和全息影像同台演出的效果。

主权项

1.一种沉浸式互动全景全息剧院演出系统，置于演出场所，该演出场所包括舞台表演区、观众区以及动作捕捉区，其特征在于，包括：全景声装置，影像投影装置，实时动作捕捉装置以及互动装置；影像投影装置至少包括全息投影设备，背景投影设备以及视频处理设备，其中全息投影设备以及背景投影设备联通于视频处理设备得到投影影像，且全息投影设备以及背景投影设备均置于舞台表演区，背景投影设备置于全息投影设备远离观众区的一侧，并且和全息投影设备之间间隔一真人表演区，全息投影设备以全息投影技术投影至少一虚拟角色；其中全息投影设备包括置于地面的LED屏和倾斜设置于LED屏的全息膜，全息膜和LED屏倾斜45°，背景投影设备包括背投幕和背投投影机；实时动作捕捉装置至少包括设置有肢体传感器的动作捕捉服装，捕捉动作捕捉演员面部表演的面部捕捉设备以及渲染处理设备，渲染处理设备联通动作捕捉服装和面部捕捉设备，获取对应的肢体信号和面部表情信号；其中渲染处理设备绑定动作捕捉演员和虚拟角色，并实时渲染对应的肢体和面部表情，生成渲染视频信号，发送给视频处理设备，视频处理设备投射渲染视频信号至全息投影设备，全息投影虚拟角色；互动装置至少包括对应观众区设置的捕捉观众反应的观众摄像头以及置于动作捕捉区的监看器；以及全景声装置至少包括设置在演出场所的扩声器设备以及音频播放设备。