[发明专利]用于3D组件的在线视角搜索

说明书

用于制定查询并且取回针对虚拟或者增强现实系统中的3D组件的相关结果的技术。在一方面中，用户使用工作流与3D组件工作，并且从一个或多个所选的透视图查看3D组件。与工作流相关联的数据以及所选的透视图被传输到在线引擎。在线引擎可以包括用于基于接收到的工作流数据和所选的透视图来自动形成查询的查询制定模块。所制定的查询可以被供应到搜索引擎以基于与所制定的查询的相关性来取回在线结果。一个或多个最相关的在线结果可以无缝地服务于用户作为工作流的一部分。

背景技术

随着用于可视化且处理三维(3D)中的信息的技术的出现，商业、学术和研究环境中的虚拟和增强现实的使用将日益广泛。这样的系统的用户可以查看3D“虚拟”或者“增强”空间中的其投影的模型(例如，在穿戴立体地显示其模型的3D渲染的眼镜时)。用户将进一步使能使用输入模态(诸如语音和手势)来设计和操纵空间中的3D组件。

为了促进虚拟和增强现实系统的可用性，允许用户在其3D投影工作流期间以无缝且直观的方式从因特网取回信息将是有利的。例如，当从所选的视角(perspective)查看3D组件时，虚拟或者增强现实系统的用户可能期望从在线搜索引擎取回关于他或她正查看的信息。提供可以促进与(诸如可以在虚拟或者增强现实系统的使用期间遭遇的)3D组件有关的在线信息的取回的系统将是期望的。

附图说明

图1图示了示出本公开的各个方面的第一场景。

图2示出了其中响应于示例性制定的用户查询的结果靠近影像中的3D组件被呈现的说明性场景。

图3图示了根据本公开的用于利用系统的工作流的方法的示例性实施例。

图4图示了根据本公开的用于使用系统的工作流的方法的备选示例性实施例。

图5图示了用于实现在此所描述的功能的系统的示例性实施例。

图6示出了用于训练可选的ML块的方法的示例性实施例。

图7图示了示例性制定的查询与示例性取回结果之间的对应性。

图8图示了参考系统所描述的在工作流期间由计算机执行的方法的示例性实施例。

图9图示了在工作流期间由服务器执行的方法的示例性实施例。

图10图示了在工作流期间由在线引擎执行的方法的示例性实施例。

图11图示了根据本公开的装置的示例性实施例。

图12图示了根据本公开的计算设备的示例性实施例。

具体实施方式

在此所描述的技术的各个方面总体上涉及用于处理在用于虚拟或者增强现实系统的工作流期间的信息的用户查询以及基于用户的查看视角自动制定查询的技术。进一步的方面涉及用于取回与制定的查询有关的结果的技术，制定的查询包括对应于3D组件的2D透视图的一个或多个图像。

结合附图下文阐述的详细描述旨在作为示例性手段“用作示例、实例或者图示”的描述，并且应当不必被解释为关于其他示例性方面是优选的或者有利的。详细描述包括出于提供本发明的示例性方面的透彻理解的目的的特定细节。对于本领域的技术人员而言将明显的是，可以在这些特定细节的情况下实践本发明的示例性方面。在一些实例中，众所周知的结构和设备以块图形式被示出以便避免模糊在此呈现的示例性方面的新颖性。

图1图示了示出本公开的各个方面的第一场景100。注意，场景100仅出于说明性目的而示出，并且不旨在将本公开的范围例如限于可以被处理、被支持的输入/输出接口的模型、特定知识领域、搜索结果或者示出或者建议的其他类型的信息的任何特定类型的模型(例如，医学、科学、技术、架构、方式、工业设计，等等)。