[发明专利]响应式视频画布生成

说明书

本公开实施例涉及响应式视频画布生成。描述了用于响应式视频画布生成的技术，以基于场景几何图形将三维效果赋予二维设计环境中的二维数字对象。例如，从包括数字视频和场景数据的输入数据生成响应式视频画布。场景数据描述环境的三维表示，并且包括多个平面。生成视觉变换并且将视觉变换与每个平面相关联，以使得数字对象能够与底层场景几何图形交互。在响应式视频画布中，接收相对于响应式视频画布的特定平面来定位二维数字对象的编辑。与特定平面相关联的视觉变换被应用于数字对象，并且可操作为将数字对象与特定平面的深度和定向对准。因此，数字对象包括基于三维表示的视觉特征。

背景技术

增强现实(AR)和虚拟现实(VR)应用包括用于用虚拟内容和对象来补充现实世界或虚拟环境的交互式界面和技术。AR和VR应用具有广泛的使用场景和实现，并且随着具有AR和VR能力的移动设备的开发和改进，捕获增强和虚拟现实数据变得越来越普遍。因此，对AR和VR应用的开发有很高的需求。

AR和VR应用开发过程的一个重要方面发生在预可视化阶段，作为环境的设计和原型制作的一部分。在一个示例中，预可视化阶段涉及许多设计人员、研究人员、客户和项目经理就AR或VR应用的外观和功能交流他们的设计想法。从原型制作的角度来看，创建“模型”来可视化这些设计想法是有用的。

然而，传统的三维用户体验(UX)工具基于复杂的交互，并且需要丰富的高级编程技术知识和三维建模技能。虽然传统的二维UX工具更容易学习，而且用户友好，但这些工具仅限于二维输入，因此缺乏处理三维AR或VR交互的能力。因此，包括在这些系统中的数字对象是静态的，并且缺乏与AR或VR应用中描述的环境交互的能力。因此，用于原型制作的传统方法或者不支持三维工作流，或者需要高级编程和3D建模技能的深入知识，这可以是具有挑战性的、耗时的，限制协作机会并且阻碍实现这些传统方法的计算设备的操作。

发明内容

描述了用于响应式视频画布生成的技术，以支持在二维设计环境中直观且快速地进行三维效果的原型制作。在一个示例中，接收包括数字视频和场景数据的输入数据。数字视频包括描绘环境的多个帧，并且场景数据描述环境的三维表示。例如，使用多个平面来定义环境的底层几何图形以描述环境。通过在二维设计环境中渲染用于交互的数字视频的至少一帧来生成响应式视频画布。此外，从场景数据生成视觉变换并且将其与每个平面相关联，以使得二维数字对象能够与三维表示交互。

接收相对于响应式视频画布的特定平面来定位二维数字对象的编辑，并且将与该特定平面相关联的相应视觉变换应用于数字对象。视觉变换可操作为将数字对象例如与特定平面的深度和定向对准。因此，基于底层场景几何图形来修改数字对象的视觉外观。以此方式，本文描述的技术克服了传统技术的限制，传统技术要么与三维工作流不兼容，要么需要高级编程和3D建模技能的深入知识。

本发明内容以简化形式介绍了一些概念，这些概念将在下面的具体实施方式中进一步描述。因此，本发明内容不旨在标识所要求保护的主题的必要特征，也不旨在用作帮助确定所要求保护的主题的范围。

附图说明

参考附图描述详细说明。附图中表示的实体指示一个或多个实体，因此可互换地引用讨论中的实体的单数或复数形式。

图1是示例实现中的环境的图示，该环境可操作为采用本文描述的响应式视频画布生成技术。

图2更详细地描绘了示出图1的响应式画布模块的操作的示例实现中的系统。

图3a和图3b描绘了响应式视频画布中的房间环境的三维表示的平面的示例。

图4a和图4b描绘了将平面的相应视觉变换应用于房间环境中的数字对象的示例。

图5a和图5b描绘了将视觉变换应用于数字对象并且随着帧被更新而更新视觉变换的示例。

图6a、图6b和图6c描绘了其中数字对象的视觉外观部分地基于与第二数字对象相关联的属性的示例。