[发明专利]利用二维输入选择对三维深度图像进行深度雕塑

说明书

一种深度雕塑系统包括眼戴设备，所述眼戴设备包括框架、连接到所述框架的横向侧的镜腿和深度捕捉摄像头。所述深度雕塑系统还包括用户输入设备。由处理器执行的编程将深度雕塑系统配置成执行经由用户输入设备跟踪二维输入选择从初始触摸点到最终触摸点的运动的功能。相应地，所述深度雕塑系统确定投影至初始触摸点和最终触摸点的初始射线和最终射线之间的旋转矩阵。所述深度雕塑系统通过将旋转矩阵应用于初始深度图像的顶点来生成深度雕塑图像。所述深度雕塑系统经由图像显示器来呈现深度雕塑图像。

相关申请的引用

本申请要求2018年9月26日在美国提交的名称为“利用二维输入选择对三维深度图像进行深度雕塑”的临时申请62/736,658号的权益，其内容通过引用全文纳入本申请中。

技术领域

本主题涉及允许用户使用二维输入来改变三维空间的可穿戴设备(如眼戴设备)以及移动设备和技术。

背景

包括便携式眼戴设备(如智能眼戴设备、头饰和头戴设备)在内的可穿戴设备等计算设备、移动设备(如平板电脑、智能手机和笔记本电脑)以及当前的个人计算机都集成了图像显示器和摄像头。利用二维(2D)输入在计算设备上观看、操纵所显示的三维(3D)图像内容(例如视频、图片等)并与其交互可能很难，利用二维(2D)输入包括利用触摸屏设备、触笔或计算机鼠标等。例如，在二维空间中操纵三维图像很难结合到计算设备中。

图形用户界面(GUI)是一种用户界面，其允许用户通过二级符号等图形图标和视觉指示符来导航计算设备，而不是基于文本的用户界面。利用二维输入在图像显示器上导航所显示的三维GUI内容是很麻烦的。

在计算设备上查看三维空间需要许多次鼠标点击和用计算机鼠标进行选择。因此，存在利用二维用户输入来简化用户与三维图像交互的需要。

附图简述

附图中仅以例举的方式而非限定的方式示出了一个或多个实施例，在附图中相同的附图标记表示相同或类似的元件。

图1A是深度雕塑系统中使用的眼戴设备示例硬件配置的右侧视图，其中用户的二维输入选择被应用于初始深度图像以生成深度雕塑图像。

图1B是图1A眼戴设备右组块的横截面顶视图，描述了深度捕捉摄像头的右侧可见光摄像头和电路板。

图1C是图1A眼戴设备示例硬件配置的左侧视图，其示出了深度捕捉摄像头的左侧可见光摄像头。

图1D是图1C眼戴设备左组块的横截面顶视图，描述了深度捕捉摄像头的左侧可见光摄像头和电路板。

图2A是深度雕塑系统中使用的眼戴设备另一示例硬件配置的右侧视图，其示出了深度捕捉摄像头的右侧可见光摄像头和深度传感器以生成初始深度图像。

图2B和2C是包括两种不同类型图像显示器的眼戴设备示例硬件配置的后视图。

图3示出了图2A眼戴设备的后透视截面图，描述了深度传感器的红外摄像头、框架前部、框架后部和电路板。

图4是穿过图3眼戴设备红外摄像头和框架截取的截面图。

图5示出了图2A眼戴设备的后透视图，描述了深度传感器的红外发射器、深度传感器的红外摄像头、框架前部、框架后部和电路板。

图6是穿过图5眼戴设备红外发射器和框架截取的截面图。

图7描述了由眼戴设备深度传感器的红外发射器发射的红外光图案和由眼戴设备深度传感器的红外摄像头捕捉的红外光发射图案反射变化的示例，以测量原始图像中像素的深度，从而生成初始深度图像。

图8A描述了由深度传感器的红外摄像头捕捉的红外光作为红外图像以及由可见光摄像头捕捉的可见光作为原始图像以生成三维场景的初始深度图像的示例。