[发明专利]一种基于AR的远程协助系统的交互方法、系统和存储介质

权利要求书

1.一种基于AR的远程协助系统的交互方法,其特征在于，包括：

实时获取待协助现场的第一图像信息并将所述第一图像信息发送至专家端；

将专家完成标注后的标注点的位置信息实时返回给求助端；

求助端获取所述标注点处的深度信息以及所述求助端相对于上一时刻的移动信息，根据所述深度信息和移动信息计算标注点的待调整量；

根据所述待调整量实时更新所述标注点在求助端和专家端显示的第二图像信息上的位置；

所述求助端获取所述标注点处的深度信息以及所述求助端相对于上一时刻的移动信息，根据所述深度信息和移动信息计算标注点的待调整量，包括：

求助端获取所述标注点处的深度值；

获取所述求助端当前时刻相对于发送所述第一图像信息时刻的位移量和转动量；

根据所述位移量、转动量以及深度值计算所述标注点在所述第二图像信息上相应的待调整量。

2.如权利要求1所述的交互方法，其特征在于，所述根据所述待调整量实时更新所述标注点在专家端显示的第二图像信息上的位置，包括：

所述待调整量包括所述标注点在第二图像信息上的待调整位移，根据所述待调整位移结合所述第二图像信息的像素间距得到待调整像素值，根据所述待调整像素值调整所述标注点在第二图像信息上的位置。

3.如权利要求1所述的交互方法，其特征在于，所述获取所述标注点处的深度信息，包括：

采用深度传感器、红外测距传感器、TOF相机、结构光相机中的一种或多种获取所述标注点处的深度值。

4.如权利要求1所述的交互方法，其特征在于，还包括：

获取所述待调整像素值后，将所述待调整像素值实时发送给专家端，并根据所述待调整像素值实时调整所述求助端和专家端的第二图像信息上所述标注点的位置。

5.一种基于AR的远程协助系统的交互系统，其特征在于，包括第一用户设备和第二用户设备；

所述第一用户设备用于获取待协助现场的第一图像信息并将所述第一图像信息发送至第二用户设备；

所述第二用户设备用于将专家完成标注后的标注点的位置信息实时返回给的第一用户设备；

所述第一用户设备还用于获取所述标注点处的深度信息以及该第一用户设备相对于上一时刻的移动信息，根据所述深度信息和移动信息计算标注点的待调整量；并根据所述待调整量实时更新所述标注点在求助端和专家端显示的第二图像信息上的位置；

所述第一用户设备包括：

摄像头，用于获取待协助现场的第一图像信息；

第一通信模块，用于将所述第一图像信息发送至所述第二用户设备；

深度相机传感器，用于获取所述标注点位置的深度信息；

第一传感器，用于获取所述摄像头相对于上一时刻的移动信息；

第一处理器，用于所述深度信息和移动信息计算标注点的待调整量，并根据所述待调整量实时更新所述标注点在所述第二图像信息上的位置。

6.如权利要求5所述的交互系统，其特征在于，所述第二用户设备包括：

第二通信模块，用于接收所述第一用户设备发送的第一图像信息；

第二显示屏，用于呈现所述第一图像信息；

输入装置，用于专家在所述第一图像信息上进行标注；

第二处理器，用于提取所述标注后在第一图像上的位置信息，并将所述标注点的位置信息发送给所述第一用户设备。

7.如权利要求6所述的交互系统，其特征在于，所述根据所述待调整量实时更新所述标注点在所述第二图像信息上的位置，包括：

所述待调整量包括所述标注点在第二图像信息上的待调整位移，根据所述待调整位移结合所述第二图像信息的像素间距得到待调整像素值，根据所述待调整像素值调整所述标注点在第二图像信息上的位置。

8.一种计算机可读存储介质，其特征在于，包括程序，所述程序能够被处理器执行以实现如权利要求1-4中任一项所述的方法。