[发明专利]远程协助方法及装置

说明书

本申请公开了一种远程协助方法及装置，涉及混合现实技术领域。该方法包括：发送协助请求至远程协助端，协助请求携带有包含现实世界中待协助场景的场景图像；接收远程协助端基于协助请求反馈的协助信息，协助信息包括针对场景图像中目标物体的协助操作，生成的针对待协助场景中的目标物体的标记数据；获取与待协助场景对应的显示模式，作为目标显示模式；基于目标显示模式，将基于标记数据渲染生成的标记图像叠加显示于待协助场景中的目标物体上，以展示远程协助端的用户针对目标物体做出的协助操作。如此，可以清晰地指导电子设备端的用户对目标物体进行操作，提高了远程协助的效率，进而提升用户体验。

技术领域

本申请涉及混合现实技术领域，更具体地，涉及一种远程协助方法及装置。

背景技术

随着互联网技术的发展，远程协助在各个行业的应用也越来越广泛。但是，在相关技术中，远程协助一般是利用电话、网络视频或者网络语音等方式提供的，因此，在远程协助的过程中均可能存在表述不清的问题，导致远程协助的效率不高，用户体验不好。

发明内容

有鉴于此，本申请提出了一种远程协助方法及装置。

第一方面，本申请实施例提供了一种远程协助方法，应用于电子设备，所述方法包括：发送协助请求至远程协助端，所述协助请求携带有包含现实世界中待协助场景的场景图像；接收所述远程协助端基于所述协助请求反馈的协助信息，所述协助信息包括针对所述场景图像中目标物体的协助操作，生成的针对所述待协助场景中的目标物体的标记数据；获取与所述待协助场景对应的显示模式，作为目标显示模式；基于所述目标显示模式，将基于所述标记数据渲染生成的标记图像叠加显示于所述待协助场景中的所述目标物体上，以展示所述远程协助端的用户针对所述目标物体做出的所述协助操作。

第二方面，本申请实施例提供了一种远程协助方法，应用于远程协助端，所述方法包括：接收电子设备发送的协助请求，所述协助请求携带有包含现实世界中待协助场景的场景图像；显示所述场景图像；响应于针对所述场景图像中目标物体的协助操作，获取在所述场景图像中所述目标物体的标记数据作为第一标记数据；将所述第一标记数据转换为针对现实世界中所述目标物体的标记数据，作为第二标记数据；将所述第二标记数据发送至所述电子设备，所述电子设备用于将基于所述第二标记数据渲染生成的标记图像叠加显示于所述待协助场景中的所述目标物体上，以展示所述远程协助端的用户针对所述目标物体做出的协助操作。

第三方面，本申请实施例提供了一种远程协助装置，应用于电子设备，所述装置包括：请求发送模块、信息接收模块、模式获取模块以及渲染显示模块。请求发送模块，用于发送协助请求至远程协助端，所述协助请求携带有包含现实世界中待协助场景的场景图像；信息接收模块，用于接收所述远程协助端基于所述协助请求反馈的协助信息，所述协助信息包括针对所述场景图像中目标物体的协助操作，生成的针对所述待协助场景中的目标物体的标记数据；模式获取模块，用于获取与所述待协助场景对应的显示模式，作为目标显示模式；渲染显示模块，用于基于所述目标显示模式，将基于所述标记数据渲染生成的标记图像叠加显示于所述待协助场景中的所述目标物体上，以展示所述远程协助端的用户针对所述目标物体做出的所述协助操作。

第四方面，本申请实施例提供了一种远程协助装置，应用于远程协助端，所述装置包括：请求接收模块、显示模块、数据获取模块、数据转换模块以及数据发送模块。请求接收模块，用于接收电子设备发送的协助请求，所述协助请求携带有包含现实世界中待协助场景的场景图像；显示模块，用于显示所述场景图像；数据获取模块，用于响应于针对所述场景图像中目标物体的协助操作，获取在所述场景图像中所述目标物体的标记数据作为第一标记数据；数据转换模块，用于将所述第一标记数据转换为针对现实世界中所述目标物体的标记数据，作为第二标记数据；数据发送模块，用于将所述第二标记数据发送至所述电子设备，所述电子设备用于将基于所述第二标记数据渲染生成的标记图像叠加显示于所述待协助场景中的所述目标物体上，以展示所述远程协助端的用户针对所述目标物体做出的协助操作。