[发明专利]一种协同式增强现实的可穿戴作业指导方法及系统

摘要

本发明公开了一种协同式增强现实的可穿戴作业指导方法及系统，包括场景确认；场景搭建；多用户协同角色分配；图像识别定位点设立；场景初始化可穿戴增强现实设备上的摄像头实时抓取使用者看到的图像，可穿戴增强现实设备的识别模块对抓取的图像进行图像处理，寻找预置的识别体，根据识别体在图像中的位置和偏转角度，确定当前使用者的位置坐标以及观看方向；通过使用者位置坐标以及使用者的角色，可穿戴增强现实设备中的控制模块读取场景需要的3D模型与工艺步骤的指导说明，并将最终展示内容发送到可穿戴增强现实设备上的增强现实模块；最终在使用者眼前呈现虚拟信息与真实环境叠加后的图像。

主权项

一种协同式增强现实的可穿戴作业指导方法，其特征是，包括：步骤(1)：场景确认：根据工厂车间工艺操作要求，确认场景中的设备种类和设备规格型号，确认场景中协同工作的工人数，确认图像识别定位点的数目和位置，确认标准的工艺步骤、使用的零部件和每个工艺步骤的指导说明；步骤(2)：场景搭建：根据步骤(1)使用三维建模软件设计场景中所包含的所有设备和零部件的3D模型，部署3D模型在场景中的初始位置，将3D模型和模型初始位置信息存储到数据存储服务器中；录入所述场景的工艺步骤和每个工艺步骤的指导说明，不同角色的工人被赋予与角色对应的工艺步骤；步骤(3)：多用户协同角色分配：多人协同工作中的每个工人都有各自的职责和工艺步骤，按照职责划分出参与场景的角色，一个角色对应一个工人，通过配置可穿戴增强现实设备的编码与角色之间的一一对应关系，使得每个工人的可穿戴增强现实设备上展示的内容与工人实际工作内容一致；步骤(4)：图像识别定位点设立：在真实环境的位置点放置识别体，通过摄像头拍摄识别体，然后通过图像处理所拍摄的图片得到真实环境中识别体的位置，所述真实环境位置点是指真实环境中识别体的位置，根据真实环境中识别体的位置设置对应虚拟场景空间的映射点，所述映射点为图像识别定位点；所述识别体设有唯一编码，建立识别体的编码与图像识别定位点之间一一对应关系；步骤(5)：场景初始化：可穿戴增强现实设备上的摄像头实时抓取使用者看到的图像，可穿戴增强现实设备的识别模块对抓取的图像进行图像处理，寻找预置的识别体，根据识别体在图像中的位置和偏转角度，确定当前使用者的位置坐标以及观看方向；通过使用者位置坐标以及使用者的角色，可穿戴增强现实设备中的控制模块读取场景需要的3D模型与工艺步骤的指导说明，并将最终展示内容发送到可穿戴增强现实设备上的增强现实模块；最终在使用者眼前呈现虚拟信息与真实环境叠加后的图像。