[发明专利]矩阵操作的动态剔除

说明书

标识神经网络内的多个层中的第一层的输出。从该输出确定位图，该位图包括二进制矩阵。基于位图来确定对于多个层中的第二层要跳过操作的特定子集。对于第二层执行除操作的该特定子集之外的操作，同时跳过操作的该特定子集。

相关申请

本申请要求于2016年8月19日提交的美国临时专利申请序列号62/377,471的权益，并且所述美国临时专利申请通过引用以其全文结合于此。

技术领域

本公开总体上涉及计算机系统领域，并且更具体地，涉及计算机视觉和增强或混合现实系统。

背景技术

随着诸如来自MagicLeap^TM、Microsoft^TM HoloLens^TM、Oculus^TM Rift^TM的那些增强现实(AR)、虚拟现实(VR)和混合现实(MR)产品以及诸如来自Valve^TM和HTC^TM的系统等其他VR系统的出现，计算机视觉和图形的世界迅速融合。这种系统中的现有方法是使用并行运行的分开的图形处理单元(GPU)和计算机视觉子系统。这些并行系统可以由与在处理器阵列和/或可编程硬件加速器阵列上运行的软件中实施的计算机视觉流水线并行的预先存在的GPU来组装。

附图说明

当结合以下附图考虑时，参考下面对所公开主题的详细描述，可以更充分地理解所公开主题的各种目的、特征和优点，在附图中相似的附图标记表示相似的元件。这些附图是示意性的，并且不旨在按比例绘制。为了清楚起见，在每个附图中并非每个组件都被标记。也并未示出所公开主题的每个实施例的每个组件，其中图示无需允许本领域普通技术人员理解所公开主题。

图1展示了常规的增强或混合现实渲染系统；

图2展示了根据一些实施例的基于体素的增强或混合现实渲染系统；

图3展示了根据一些实施例的密集体积表示与稀疏体积表示之间的差异；

图4展示了根据一些实施例的场景的复合视图；

图5展示了根据一些实施例的示例元素树结构中的细节层次；

图6展示了根据一些实施例的可以利用本申请的数据结构和体素数据的应用；

图7展示了根据一些实施例的用于辨识3D数字的示例网络；

图8展示了根据一些实施例的使用隐含的细节层次来对同一数据结构执行的多种分类；

图9展示了根据一些实施例的2D卷积神经网络的操作消除；

图10展示了根据一些实施例的来自对示例测试图像的分析的实验结果；

图11展示了根据一些实施例的用于剔除操作的硬件；

图12展示了根据一些实施例的对用于剔除操作的硬件的精化；

图13展示了根据一些实施例的硬件；

图14展示了根据一些实施例的用于生成位图的示例电路系统；

图15展示了根据一些实施例的与示例矩阵乘法操作相关联的位图的示例使用；

图16展示了根据一些实施例的示例三维位图的使用；

图17展示了根据一些实施例的示例体积数据结构用作位图；

图18展示了根据一些实施例的流程图，该流程图展示了示例体积数据结构的生成和使用；

图19描绘了根据一些实施例的示例多时隙向量处理器；