[发明专利]一种基于图像和雷达数据的舞台交互系统

摘要

本发明公开了一种基于图像和雷达数据的舞台交互系统，包括信息采集模块、处理模块和控制模块。所述信息采集模块包括安装在舞台正前方的一台RGB摄影机和一台LiDAR激光雷达，实时探测舞台上表演者的姿态信息，作为生产姿态的训练数据或现场数据；处理模块包括姿态生成和姿态识别，姿态生成单元利用双流深度学习网络学习训练数据，产生表演者的姿态模型；姿态识别根据表演者的姿态模型识别匹配对应的预设姿态，将结果发送到控制模块。控制单元模块根据接收到的识别结果，控制舞台屏幕的显示内容随表演者姿态变化。通过上述方式，本发明能够在较高精度下使表演者可以通过动作姿态与舞台场景实时交互。