[发明专利]一种基于增强现实的智能终端3D手表试戴方法及系统

摘要

本发明涉及一种基于增强现实的智能终端3D手表试戴方法及系统，提取出和手部肤色相近的图像信息，通过从背景图中提取的手部图像信息，轮廓提取后进行凸包检测，根据给定的阀值判断是否是手部；再次获取轮廓进行凸包检测，确定手腕处的凸包；根据不同的智能终端设备给定不同的虚拟场景摄像机内部参数，计算手腕的坐标点与虚拟场景摄像机之间相对变换关系计算得到投影矩阵，使用手腕的坐标点与虚拟场景摄像机之间相对变换关系和投影矩阵将得到的手腕坐标点投影到三维场景中，将手表的3D模型根据投影矩阵投影到三维场景中手腕位置上。本发明不需要使用标识信息的图片，只要拥有一台智能终端，通过摄像头实时获取用户的手腕图像，经过智能终端处理后在屏幕上显示试戴效果。

主权项

一种基于增强现实的智能终端3D手表试戴方法，其特征在于：包括以下步骤：步骤S1：摄像头采集用户的手部图像，采用肤色识别模型提取出和手部肤色相近的图像信息，得到初步提取的手部图像信息；步骤S2：对步骤S1中得到的初步提取的手部图像信息，通过从背景图中提取的手部图像信息，轮廓提取后进行凸包检测，根据给定的阀值判断是否是手部；步骤S3：再次获取轮廓进行凸包检测，得到起始点、结束点和深度点；计算深度点分别到起始点和结束点的长度，计算以深度点为顶点，以起始点和结束点为边的夹角；根据预先设定好的长度和夹角范围判断此凸包是否是手腕处的凸包，若确定为手腕处的凸包，则将此凸包的深度点作为手腕的坐标点；步骤S4：根据不同的智能终端设备给定不同的虚拟场景摄像机内部参数，计算手腕的坐标点与虚拟场景摄像机之间相对变换关系：其中，所述变换关系采用下式实现：P＝A|[R|T]|M；其中，M表示三维空间的一个点，[R|T]表示一个[3|4]矩阵，该矩阵为一个欧式空间变换，A表示虚拟场景摄像机矩阵的内部参数矩阵，P表示M在屏幕上的投影；步骤S5：通过计算得到投影矩阵，使用手腕的坐标点与虚拟场景摄像机之间相对变换关系和投影矩阵将得到的手腕坐标点投影到三维场景中，将手表的3D模型根据投影矩阵投影到三维场景中手腕位置上。