[发明专利]基于手势识别产生交互式虚拟用户界面的方法及相关装置

说明书

本发明公开了一种基于手势识别产生交互式虚拟用户界面的方法及相关装置，该方法包含有：在复数个影像中侦测具有两只手的影像；当侦测到有两只手的影像时，识别两只手的手势；当一只手识别为指向手势且另一只手识别为打开手势时，投影虚拟用户界面物件至该打开手势的手上；追踪该指向手势的手的指尖，用来取得该指尖与该打开手势的手之间的相对位置；判断该指尖与该打开手势的手之间的该相对位置是否符合预设规则；当该指尖与该打开手势的手之间的该相对位置符合该预设规则时，将该指向手势的手的指尖的动作视为点击命令。

技术领域

本发明涉及一种显示用户界面的方法及装置，尤其涉及一种基于手势识别产生交互式虚拟用户界面的方法及相关装置。

背景技术

大部分的虚拟实境/扩增实境/混合实境/延展实境系统可依据使用者穿载的用户界面装置，来追踪使用者的动作行为。用户界面装置(如游戏手把、控制器、触控面板等)用来提供使用者与系统软件之间的互动，举例来说，系统软件包含有运算装置执行的虚拟实境游戏。此外，使用者穿载的头戴式显示器(head-mounted display，HMD)用来显示运算装置产生的互动影像，能让使用者体验虚拟实境。

为了增加使用者对虚拟实境沉浸的意愿，现有技术提出了虚拟用户界面技术，以提供使用者新的体验及用户界面。然而，目前没有采用手势识别来产生交互式虚拟键盘的规范。因此，目前的用户界面仍然使用传统的遥控器或操纵杆。

发明内容

因此，本发明的主要目的在于提供一种基于手势识别产生交互式虚拟用户界面的方法及相关装置，以解决上述问题。

本发明公开一种基于手势识别产生交互式虚拟用户界面的方法，用于互动系统，该方法包含有：在复数个影像中侦测具有两只手的影像；当侦测到有两只手的影像时，识别两只手的手势；当一只手识别为指向手势且另一只手识别为打开手势时，投影虚拟用户界面物件至该打开手势的手上；追踪该指向手势的手的指尖，用来取得该指尖与该打开手势的手之间的相对位置；判断该指尖与该打开手势的手之间的该相对位置是否符合预设规则；当该指尖与该打开手势的手之间的该相对位置符合该预设规则时，将该指向手势的手的指尖的动作视为点击命令。

本发明另公开一种头戴式显示器，用来根据手势识别产生交互式虚拟用户界面，该头戴式显示器包含有：影像传感器；处理单元，用来执行程序码；存储单元，耦接于该处理单元及该影像传感器，用来存储该程序码，其中该程序码指示该处理单元执行以下步骤：在复数个影像中侦测具有两只手的影像；当侦测到有两只手的影像时，识别两只手的手势；当一只手识别为指向手姿且另一只手识别为打开手势时，投影虚拟用户界面物件至该打开手势的手上；追踪该指向手势的手的指尖，用来取得该指尖与该打开手势的手之间的相对位置；判断该指尖与该打开手势的手之间的该相对位置是否符合预设规则；当该指尖与该打开手势的手之间的该相对位置符合该预设规则时，将该指向手势的手的指尖的动作视为点击命令。

本发明另公开一种互动系统中的电子装置，用来根据手势识别产生交互式虚拟用户界面，该电子装置包含有：处理单元，用来执行程序码；存储单元，耦接于该处理单元，用来存储该程序码，其中该程序码指示该处理单元执行以下步骤：在复数个影像中侦测具有两只手的影像；当侦测到有两只手的影像时，识别两只手的手势；当一只手识别为指向手姿且另一只手识别为打开手势时，投影虚拟用户界面物件至该打开手势的手上；追踪该指向手势的手的指尖，用来取得该指尖与该打开手势的手之间的相对位置；判断该指尖与该打开手势的手之间的该相对位置是否符合预设规则；当该指尖与该打开手势的手之间的该相对位置符合该预设规则时，将该指向手势的手的指尖的动作视为点击命令。

附图说明

图1为本发明实施例的互动系统的示意图。

图2为本发明实施例的互动流程的示意图。

图3为本发明实施例的手势侦测影像的示意图。

图4为本发明实施例的互动显示影像的示意图。