[发明专利]图像处理设备和方法、摄像系统、移动体及存储介质

说明书

本发明提供图像处理设备和方法、摄像系统、移动体及存储介质。图像处理设备包括：获取单元，其被构造为获取基于可见光而拍摄的第一图像数据和基于红外光而拍摄的第二图像数据；合成系数计算单元，其被构造为基于所述第二图像数据和第三图像数据来计算合成系数，所述第三图像数据包括从第一图像数据提取的辉度信息；以及合成单元，其被构造为通过使用所述合成系数对所述第二图像数据和所述辉度信息进行加权相加来计算第四图像数据。

技术领域

本公开涉及一种图像处理设备、摄像系统、移动体和程序。

背景技术

日本特开第2011-239259号公报公开了一种图像处理设备，其用于合成仅具有可见光范围内的波长分量的彩色图像数据和仅具有可见光范围以外的波长分量的单色图像数据。日本特开第2011-239259号公报中公开的图像处理设备从彩色图像数据中提取颜色信息，从单色图像数据中提取辉度信息，并通过对颜色信息和辉度信息进行合成来生成合成图像数据。因此，配设有日本特开第2011-239259号公报中公开的图像处理设备的相机，即使在可能发生由于雾、霾等造成的光散射的拍摄条件下也可以清楚地拍摄感兴趣的被摄体，可以应对低照度的拍摄条件，并可以拍摄彩色图像。

在日本特开第2011-239259号公报公开的图像处理设备中，由于合成了由不同波长的光拍摄的图像数据，因此根据被摄体的光学特性可能产生不自然的图像。

发明内容

因此，本公开旨在提供一种图像处理设备、摄像系统、移动体、图像处理方法和程序，其可以生成更自然的合成图像。

根据本公开的一方面，提供了一种图像处理设备，其包括：获取单元，其被构造为获取基于可见光拍摄的第一图像数据和基于红外光拍摄的第二图像数据；合成系数计算单元，其被构造为基于所述第二图像数据和第三图像数据计算合成系数，所述第三图像数据包括从第一图像数据提取的辉度信息；以及合成单元，其被构造为通过使用所述合成系数对所述第二图像数据和所述辉度信息进行加权相加来计算第四图像数据。

根据本公开的另一方面，提供了一种图像处理方法，该方法包括：获取基于可见光而拍摄的第一图像数据和基于红外光而拍摄的第二图像数据；基于第二图像数据和第三图像数据计算合成系数，所述第三图像数据包括从所述第一图像数据提取的辉度信息；以及通过使用所述合成系数对所述第二图像数据和所述辉度信息进行加权相加来计算第四图像数据。

根据本公开的又一方面，提供了一种使计算机执行图像处理方法的程序，所述图像处理方法包括：获取基于可见光而拍摄的第一图像数据和基于红外光而拍摄的第二图像数据；基于所述第二图像数据和第三图像数据计算合成系数，所述第三图像数据包括从所述第一图像数据提取的辉度信息；以及通过使用所述合成系数对所述第二图像数据和所述辉度信息进行加权相加来计算第四图像数据。

通过以下参照附图对示例性实施例的描述，本发明的其他特征将变得清楚。

附图说明

图1是示出根据第一实施例的摄像系统的示意性构造的框图。

图2是示出根据第一实施例的摄像设备的示意性构造的框图。

图3是根据第一实施例的像素的电路图。

图4是示出根据第一实施例的滤色器(color filter)的布置的示意图。

图5是示出根据第一实施例的信号处理单元的示意性构造的功能框图。

图6是示出在根据第一实施例的摄像系统中进行的图像合成处理的概述的流程图。

图7A、图7B、图7C和图7D是示出根据第一实施例的彩色图像数据和红外图像数据的示意图。

图8A、图8B和图8C是示出根据第一实施例的HSV数据的示意图。

图9A和图9B是示出根据第二实施例的摄像系统和移动体的构造示例的图。