[发明专利]估测图像中的深度的方法

说明书

本发明公开一种估测图像中的深度的结构光系统及方法。接收图像，其中所述图像是已在上面投射参考光图案的场景的图像。参考光图案的投影包括预定数目个子图案。基于硬码模板匹配技术或基于所接收图像的分块对应于参考光图案的子图案的机率来对分块与子图案进行匹配。如果使用查找表，则所述表可为机率矩阵，可包含预先计算的关联性得分或者可包含预先计算的类别标识。基于分块与子图案之间的不同来确定分块的深度的估测值。

[相关申请的交叉参考]

本专利申请主张在2017年12月12日提出申请的美国临时专利申请第62/597,904号的优先权，所述美国临时专利申请的公开内容全文并入本申请供参考。

技术领域

本文所公开主题涉及一种用于结构光系统的装置及方法，且更具体来说，涉及一种用于将图像的分块匹配到参考光图案的分块的装置及方法。

背景技术

一种广泛用于在结构光三维(three dimensional，3D)相机系统(也称为立体相机系统(stereo-camera system))中估测深度值的技术是通过搜索图像中的分块与参考图案中的分块的最佳匹配来进行。为减少这种搜索的总体计算负担，假设图像分块位于参考图案的接近水平邻域(near horizontal neighborhood)中。另外，参考图案被设计成仅存在有限的一组独特子图案，这些子图案在水平方向上及垂直方向上重复以填充整个投影空间，这进一步简化了搜索过程。利用参考图案中独特图案的已知排列方式来识别图像分块的“类别”，并且转而确定图像分块与参考分块之间的不同。还假设图像分块以深度像素位置为中心，这也简化了深度估测的计算。

然而，如果图像分块大小及搜索范围变大，则分块搜索变得耗时且需要密集的计算，从而难以实现实时深度估测。除了具有明显的计算成本之外，一些结构光三维相机系统还可能在深度估测中出现明显的噪声。结果，这种结构光三维相机系统具有高的功耗，且可能对图像缺陷(image flaw)(例如，像素噪声、模糊、畸变及饱和)敏感。

发明内容

本公开的示例性实施例可提供一种快速地估测图像中的深度的结构光系统及方法。

示例性实施例提供一种通过结构光系统来估测图像中的深度的方法，所述方法可包括：接收所述图像，其中所述图像可为已在上面投射参考光图案的场景的图像，其中所述图像可包括所述参考光图案的投影，且其中所述参考光图案可包括参考数目个子图案；基于所述图像的分块对应于所述参考光图案的所述参考数目个子图案中的其中一子图案的机率来对所述分块与所述其中一子图案进行匹配；以及基于所述分块与所述子图案之间的不同来确定所述分块的深度的估测值。在一个实施例中，所述机率可包含在查找表中，所述查找表可包括机率矩阵，且所述分块可包括参考数目个像素，且其中对所述分块与所述其中一子图案进行匹配还可包括：将所述分块中所包括的像素二值化；由所述像素形成向量；以及通过将所述像素的向量乘以所述机率矩阵来确定所述分块的类别，其中所述类别可对应于与所述分块匹配的所述其中一子图案。

另一个示例性实施例提供一种通过结构光系统来估测图像中的深度的方法，所述方法可包括：接收所述图像，其中所述图像可为已在上面投射参考光图案的场景的图像，其中所述图像可包括所述参考光图案的投影，且其中所述参考光图案可包括参考数目个子图案；将所述图像中所包括的至少一个分块二值化，所述分块可包括参考数目个像素；通过基于经二值化的所述分块中的1的第一数目以及每一个经二值化的子图案中的1的第二数目将所述至少一个分块的误差函数E_k最小化来将所述至少一个分块匹配到所述参考光图案的其中一子图案；以及基于所述至少一个分块与所述其中一子图案之间的不同来确定所述图像的所述至少一个分块的深度的估测值。在一个实施例中，所述每一个经二值化的子图案中的1的所述第二数目可通过以下方式确定：将第一经二值化的子图案中的1的所述第二数目递增2来获得位于所述第一经二值化的子图案后面的第二经二值化的子图案中的1的所述第二数目。