[发明专利]一种增强现实的人机交互方法及设备

说明书

本发明公开了一种增强现实的人机交互方法及设备，包括：在车辆前设置带标尺摄像头，所述带标尺摄像头采集车辆前的图像；提取所述图像中各个实际对象，并确定各个实际对象的参数；确定虚拟对象的参数；将实际对象与虚拟对象进行匹配，确定虚拟对象的缩放比，根据所述缩放比确定所述虚拟对象图形；将所述虚拟对象图形通过增强现实设备显示；驾驶者通过语音或手势的方式与虚拟现实设备进行人机交互。

技术领域

本发明涉及人机交互技术领域，具体涉及一种增强现实的人机交互方法及设备。

背景技术

我们周围的世界非常丰富，待了解对象上有许多数字信息，可用不同的方法来访问该对象的信息，例如：查询对象的名称或通过搜索引擎查询该对象的描述信息。随着移动设备的普及，目前有的移动设备上有种功能来访问对象信息，该功能为现实增强(Augmented Reality，简称AR)功能。AR是利用虚拟信息对真实场景进行现实增强的技术。AR基于摄像头等采集器件采集到的真实物理环境，通过将文本、二维图形、三维模型等虚拟生成的信息标注在显示屏所显示的真实物理环境中的物体上，从而实现用户身处的显示物理环境的注释、说明，或者增强、强调现实环境的某些效果。

现有技术中，在车载系统中利用现实增强技术是通过抬头显示设备将图像投影至驾驶员正对的面板上，驾驶员不用再低头查看仪表盘等，但是，现有技术中存在的技术问题是，投影至面板上的图像不能与实际图像相匹配，造成驾驶员获得的信息发生混乱的情况。

发明内容

本发明提供一种增强现实的人机交互方法及设备，以解决现有技术中存在的上述问题。

本发明提供一种增强现实的人机交互方法，包括：

S100，在车辆前设置带标尺摄像头，所述带标尺摄像头采集车辆前的图像；

S200，提取所述图像中各个实际对象，并确定各个实际对象的参数；

S300，确定虚拟对象的参数；将实际对象与虚拟对象进行匹配，确定虚拟对象的缩放比，根据所述缩放比确定所述虚拟对象图形；

S400，将所述虚拟对象图形通过增强现实设备显示；

S500，驾驶者通过语音或手势的方式与虚拟现实设备进行人机交互。

优选的，所述S100之后还包括：

S600，在车辆后设置普通摄像头，所述普通摄像头采集车辆后的后视图像；

S700，将所述后视图像与带标尺摄像头采集车辆前的图像进行全景图像融合，形成全景图像。

优选的，所述S300包括：

在所述车载控制系统形成所述虚拟对象图形；

在所述S300之后还包括：

S301，在所述车辆上设置车载显示屏，所述车载显示屏连接车载控制系统；

S302，所述车载控制系统将所述虚拟对象图形与所述带标尺摄像头采集的图像进行融合，形成虚拟现实图像；

S303，将所述虚拟现实图像传输至所述车载显示屏上；

S304，在所述车载显示屏上显示所述虚拟现实图像。

S305，驾驶者通过语音或手势的方式与所述车载显示屏进行人机交互。

优选的，所述S500包括：

S501，在正对驾驶者的位置设置手势摄像头，采集驾驶者的动作信息；

S502，在人机交互过程中，在所述增强现实设备的显示端显示操作手势或语音提示；

S503，驾驶者根据显示的操作手势或语音提示进行动作或输入语音指令；