[发明专利]一种基于摄像头和IMU数据混合的实时全身动捕系统、方法

摘要

本发明公开一种基于摄像头和IMU数据混合的实时全身动捕系统、方法，其中方法包括：采集人体的视频帧图像；根据视频帧图像的颜色信息和深度信息预测出3D骨架的关节位置；根据所预测的各人体关节在三维空间中的坐标位置构建出人体骨架模型；通过摄像设备实时获取人体的运动姿态信息；利用捆绑在人体上的各个关节处的IMU节点实时获取相应关节的运动姿态；融合摄像设备和IMU节点获取的关节运动姿态，以校正人体关节的运动姿态；根据校正后的关节运动姿态驱动人体骨架模型运动。本发明集成了视觉动捕技术和IMU惯性测量技术的优点，可有效保证动捕数据的获取精度，确保了驱动人体骨骼模型运动的可靠性和稳定性。