[发明专利]影像处理电路

说明书

本发明提出一种影像处理电路，其中存储器控制单元先将参考影像与参数从第一存储器移动至第三存储器，卷积神经网络电路从第三存储器取得参数。存储器控制单元也将至少一部分的参考影像从第三存储器移动至第二存储器，其中第三存储器的储存空间大于第二存储器的储存空间。深度解码器从第二存储器取得参考影像，根据此参考影像与结构化影像计算出深度信息，并将深度信息储存至第二存储器。

技术领域

本发明涉及一种影像处理电路，且特别涉及一种卷积神经网络电路的存储器架构。

背景技术

近年来，卷积神经网络的技术已受到学术界与业界的大量关注，并且在很多领域上都有了突破性的发展，特别是在影像处理上。当使用卷积神经网络来进行影像处理的应用时，往往会需要大量的存储器来储存影像以及卷积神经网络中的参数，因此如何设计适当的硬件架构来储存或搬运这些数据，为此领域技术人员所关心的议题。

发明内容

本发明的实施例提出一种影像处理电路，其包括第一存储器、第二存储器、存储器控制单元、卷积神经网络电路与深度解码器。其中第一存储器储存有参考影像与多个参数，第二存储器的储存空间小于第一存储器的储存空间。存储器控制单元电性连接至第一存储器与第二存储器，卷积神经网络电路电性连接至第二存储器，深度解码器电性连接至第二存储器。深度解码器用以从红外线感测器接收结构化影像。在第一模式下：存储器控制单元将参考影像与参数从第一存储器移动至第三存储器，其中第三存储器电性连接至卷积神经网络电路、存储器控制单元与第二存储器，并且第三存储器的储存空间大于第二存储器的储存空间；卷积神经网络电路从第三存储器取得参数，存储器控制单元将参考影像的至少一部分从第三存储器移动至第二存储器；以及深度解码器从第二存储器取得部分的参考影像，根据此部分的参考影像与结构化影像计算出深度信息，并将深度信息储存至第二存储器。

在一些实施例中，影像处理电路还包括总线与多工器。总线电性连接至存储器控制单元、第二存储器与卷积神经网络电路，多工器电性连接至总线、第三存储器与卷积神经网络电路。在第一模式中，卷积神经网络电路是透过多工器从第三存储器取得参数。

在一些实施例中，在第一模式中，存储器控制单元还透过总线将参数的一部分从第三存储器移动至第二存储器；以及当存储器控制单元透过总线将参考影像的部分从第三存储器移动至第二存储器的同时，卷积神经网络电路直接从第二存储器取得上述的参数。

在一些实施例中，上述部分的参数是对应至卷积神经网络的层。

在一些实施例中，第二存储器还接收来自红外线感测器的灰阶影像。卷积神经网络电路还从第二存储器取得深度信息与灰阶影像，并根据灰阶影像、深度信息与参数执行物件检测程序或物件识别程序。

在一些实施例中，上述部分的参考影像包含至少一行的像素。

在一些实施例中，上述的第二存储器为静态随机存取存储器，第三存储器为动态随机存取存储器。

在一些实施例中，第一存储器为快闪存储器。

在一些实施例中，存储器控制单元切换在第一模式与第二模式之间。在第二模式中：存储器控制单元将参考影像与参数从第一存储器移动至第二存储器；卷积神经网络电路从第二存储器取得参数；以及深度解码器从第二存储器取得参考影像，根据参考影像与结构化影像计算出深度信息，并将深度信息储存至第二存储器。

在一些实施例中，存储器控制单元根据实体开关、检测电路或固件设定切换在第一模式与第二模式之间。

在上述的影像处理电路中，可以减少存储器的空间需求，或在不同模式下采用不同的存储器架构。

为让本发明的上述特征和优点能更明显易懂，下文特举实施例，并配合附图作详细说明。

附图说明

图1是根据一实施例示出电子装置的电路示意图。