[发明专利]用于使用融合数据进行对象跟踪的系统和方法

摘要

在一个实施例中，一种方法包括：使用在用户所穿戴的可穿戴设备中实现的一个或多个摄像头来捕获第一图像，该第一图像描绘了在环境中该用户的正握持控制器的手的至少一部分；从第一图像中识别一个或多个特征，以估计用户的手的姿势；基于用户的手的姿势和所估计的抓握，来估计控制器的第一姿态，该所估计的抓握限定了用户的手与控制器之间的相对姿势；接收控制器的IMU数据；以及，通过使用控制器的IMU数据对控制器的第一姿态进行更新，来估计控制器的第二姿态。该方法利用多个数据源来在环境的各种条件下跟踪控制器，以一致地提供精确的控制器跟踪。