[发明专利]手部虚拟饰品试戴的人机交互方法和系统

摘要

本发明公开了一种手部虚拟饰品试戴的人机交互方法和系统，实现的是提高客户购买饰品的购买体验的技术效果。方法包括：分别导入手部三维模型和饰品三维模型，并将饰品三维模型显示于手部三维模型的指定位置上；接收深度传感器在其感知空间内获取的手部的深度信息，并基于手部的深度信息，调用物理引擎调整手部三维模型与饰品三维模型的显示。构建饰品的三维模型以及客户手部的手部三维模型，将饰品三维模型佩戴于手部三维模型上，并通过佩戴手和交互手的相对运动，结合物理引擎实现虚拟控制饰品三维模型的位置或角度的变化，模拟真实试戴中调整手部和饰品的位置和角度，在客户不能真实试戴饰品时，实现真实试戴饰品的效果。

主权项

1.手部虚拟饰品试戴的人机交互方法，其特征在于，包括：分别导入手部三维模型和饰品三维模型；将所述饰品三维模型显示于所述手部三维模型的指定位置上；接收深度传感器在其感知空间内获取的手部的深度信息；基于所述手部的深度信息，调用物理引擎调整所述手部三维模型和所述饰品三维模型的显示;所述手部三维模型包括佩戴手三维模型和交互手三维模型；则基于所述手部的深度信息，调用物理引擎调整所述手部三维模型和所述饰品三维模型的显示，具体为：基于所述手部的深度信息，判断所述佩戴手三维模型的状态是否发生变化；若否，基于所述手部的深度信息，判断所述佩戴手三维模型与所述交互手三维模型是否存在相互运动；若是，向所述饰品三维模型施力，并调用所述物理引擎模拟所述手部三维模型与所述饰品三维模型之间的摩擦和碰撞，使得所述饰品三维模型相对所述手部三维模型移动;则所述基于所述手部的深度信息，判断所述佩戴手三维模型与所述交互手三维模型是否存在相对运动，具体为：基于所述手部的深度信息，得到所述佩戴手三维模型中手指或手腕的方向信息；判断所述交互手三维模型是否相对于所述佩戴手三维模型中手指或手腕的方向平移移动；若是，则所述调用物理引擎调整所述手部三维模型和所述饰品三维模型的显示，具体为：向所述饰品三维模型施力，并调用所述物理引擎模拟所述手部三维模型与所述饰品三维模型之间的摩擦和碰撞，使得所述饰品三维模型相对所述佩戴手三维模型中手指或手腕上的方向平移移动;和/或，基于所述手部的深度信息，得到所述佩戴手三维模型中手指或手腕的方向信息；判断所述交互手三维模型是否相对于所述佩戴手三维模型中的手指或手腕进行旋转；若是，则所述调用物理引擎调整所述手部三维模型和所述饰品三维模型的显示，具体为：向所述饰品三维模型施力，并调用所述物理引擎模拟所述手部三维模型与所述饰品三维模型之间的摩擦和碰撞，使得所述饰品三维模型相对所述佩戴手三维模型中手指或手腕旋转。