[发明专利]远程协助方法、系统及增强现实终端

说明书

技术领域

本发明涉及增强现实技术领域，尤其涉及远程协助技术。

背景技术

增强现实技术是一种将真实世界信息和虚拟世界信息“无缝”集成的新技术，是把原本在现实世界的一定时间空间范围内很难体验到的实体信息(视觉信息,声音,味道,触觉等)，通过电脑等科学技术，模拟仿真后再叠加，将虚拟的信息应用到真实世界，被人类感官所感知，从而达到超越现实的感官体验。增强现实技术的一项前沿应用，就是增强现实智能眼镜。以智能眼镜为载体，将多种虚拟技术信息与现实操作相结合，在培训、医疗、军事、工业生产等诸多领域，能够产生巨大的推动作用，

增强现实技术可广泛应用于远程协助，正在得到越来越多的关注和重视。目前，增强现实领域的远程协助多采用一对一方式，由增强现实终端向远程专家发起一对一远程协助，远程专家对增强现实终端采集的实时画面进行观察后向增强现实终端提供指导文本、图片等数据。

发明内容

本申请旨在提供一种新型的远程协助技术，支持多位专家在不同地域同时远程协助现场工作人员。

本申请一方面提供一种远程协助方法，包括：

在远程协助服务器中创建一对多视频会商房间；

使被协助终端与至少一个协助终端经由所述一对多视频会商房间建立通信；

所述被协助终端采集真实场景信息；

所述真实场景信息被传送到所述至少一个协助终端；

所述至少一个协助终端中显示出依据所述真实场景信息生成的虚拟场景；

所述至少一个协助终端检测到用户输入的专家指导信息时，所述专家指导信息被传送到所述被协助终端；

在所述被协助终端上进行与所述专家指导信息相应的提示。

较佳的，在所述被协助终端上进行与所述专家指导信息相应的提示包括：在所述被协助终端上显示出所述被协助终端的用户观察到的真实场景和根据接收到的所述专家指导信息生成的虚拟图像叠加出的增强现实图像。

较佳的，依据所述真实场景信息生成的虚拟场景为依据所述真实场景信息渲染出的三维虚拟场景。

较佳的，还包括对所述一对多视频会商房间进行管理，包括：

在有新用户进入所述视频会商房间时，将新用户加入在线用户列表中，向房间内的其他在线用户通知新用户加入信息，并向新用户通知其他在线用户信息；和/或

在有用户离开所述视频会商房间时，将离开房间的用户自所述在线用户列表中删除，并向房间内的其他在线用户通知用户离开信息。

较佳的，所述一对多视频会商房间是依所述被协助终端发起的协助请求创建的；或者

所述一对多视频会商房间是依所述协助终端发起的询问请求创建的；或者

所述一对多视频会商房间是在所述远程协助服务器中预先创建的。

较佳的，所述被协助终端为增强现实终端。

较佳的，在所述被协助终端上进行与所述专家指导信息相应的提示还包括语音提示。

本申请另一方面提供一种远程协助系统，包括被协助终端、至少一个协助终端及远程协助服务器，其中：

所述被协助终端包括第一处理模块及分别与所述第一处理模块连接的图像采集模块、第一显示模块及第一通信模块，所述图像采集模块被配置为实时采集真实场景信息，所述第一通信模块经由网络与所述远程协助服务器连接；

所述远程协助服务器被配置为创建并管理一对多视频会商房间，所述被协助终端与所述至少一个协助终端经由所述一对多视频会商房间建立通信；

每个所述协助终端包括第二处理模块及分别与所述第二处理模块连接的用户输入模块、第二显示模块及第二通信模块，所述第二通信模块经由网络与所述远程协助服务器连接，所述第二显示模块被配置为显示出依据所述被协助终端所采集的真实场景信息生成的虚拟场景，所述用户输入模块被配置为接收协助终端的用户输入的专家指导信息；

其中，所述被协助终端的第一显示模块被配置为显示出被协助终端的用户观察到的真实场景和根据所述专家指导信息生成的虚拟图像叠加出的增强现实图像。

本申请再一方面提供一种增强现实终端，包括：处理模块及分别受所述处理模块控制的图像采集模块、输出模块及通信模块，其中：

所述图像采集模块被配置为实时采集所述增强现实终端所在的真实世界的真实场景信息，

所述通信模块被配置为通过所创建的一对多视频会商房间使所述增强现实终端与至少一个外部设备建立通信，向所述至少一个外部设备提供所述真实场景信息，以及接收来自所述至少一个外部设备的专家指导信息；