[发明专利]成像装置、成像方法和图像处理装置

说明书

技术领域

本技术涉及一种成像装置、成像方法和图像处理装置。更具体地，本技术涉及具有两个图像传感器的成像装置、为所述成像装置提供的成像方法、以及在所述成像装置中采用的图像处理装置。

背景技术

为了提高拍摄图像的分辨率，提供一种减少图像传感器的每个像素的大小使得增大每单位面积的像素的数量的有用技术。然而，每单位时间要从其读出信号的像素的数量受到传输带宽施加的约束或其他限制（诸如，图像传感器的芯片面积和功耗）的限制。

因此，在本领域的现状下，广泛采用以下描述的技术。也就是说，在比较宽松的限制（诸如，对应于15fps的帧速率的约束）的情况下的静态图像拍摄操作中，花费充分的时间读出来自所有像素的信号。另一方面，在比较严格的约束（诸如，对应于60fps的帧速率的约束）的情况下的、要求读出连续图像的监视操作或运动图像拍摄操作中，经历读出处理的像素的数量减少，并且以期望的帧速率和以全面角（all face angle）执行读出处理。

在该情况下，通过进行诸如以固定间隔对垂直和水平方向的像素执行的稀疏处理的处理、或者相互组合图像传感器上具有相同颜色的多个邻近像素，减少经历读出处理的像素的数量。日本专利公开No.2010-252390是描述对经历读出处理的像素进行稀疏处理的技术的文件的典型示例。

发明内容

对于利用图像传感器获得彩色图像的处理，已经设计了一种技术，该技术通过在诸如拜耳阵列的阵列中以固定间隔交替安排多个颜色，对每个颜色提高空间分辨率。然而，利用该技术，对于读出操作经历以某一固定间隔进行的稀疏处理的情况，此外还对于相互组合具有相同颜色的多个相邻像素的情况，当然引起以下描述的问题。在后者情况下，在如同具有超过组合后空间采样频率的频率的部分的精细图案部分引起问题。以上所述问题是出现到高频成分的低频侧的折回（folding-back）的问题，该问题导致生成伪色和/或生成具有滚花阶梯形状的斜线的现象（或锯齿）。结果，图像的质量劣化。

因此期望基于具有高帧速率的拍摄图像的数据提高图像的质量。

根据本技术的一个模式，提供一种成像装置，包括：

第一图像传感器，配置为输出具有第一像素数的第一图像数据；

第二图像传感器，配置为输出具有大于第一像素数的第二像素数的第二图像数据；

像素数转换部分，配置为基于第一图像传感器输出的第一图像数据生成具有第三像素数的第三图像数据，并且基于第二图像传感器输出的第二图像数据生成具有等于第三像素数的像素数的第四图像数据；

相似度计算部分，配置为基于第一图像数据和第二图像数据，得出根据第一图像数据的图像和根据第二图像数据的图像之间的相似度；以及

加权加法部分，配置为根据相似度计算部分得出的相似度，通过进行将第四图像数据的相似区域的图像数据加到像素数转换部分生成的第三图像数据的加权加法运算，生成第五图像数据。

如上所述，根据本技术的成像装置采用第一和第二图像传感器。第一图像传感器输出具有第一像素数的第一图像数据，而第二图像传感器输出具有大于第一像素数的第二像素数的像素的第二图像数据。在该情况下，第一图像传感器的光学系统可以与第二图像传感器的光学系统相同，或者第一图像传感器的光学系统可以不同于第二图像传感器的光学系统。

例如，第一图像传感器上的每个像素的大小与第二图像传感器上的每个像素的大小相同，并且第一图像传感器的像素数量也与第二图像传感器的像素数量相同。在该情况下，例如，典型地以低帧速率对第二图像传感器的所有像素进行读出操作，以便从第二图像传感器获得第二图像数据。而且在该情况下，例如，通过在垂直和水平方向以固定间隔对经历读出操作的像素执行诸如稀疏处理的处理、或者相互组合第一图像传感器上具有相同颜色的多个相邻像素的处理，典型地以高帧速率对第一图像传感器的像素进行全面角读出操作，以便从第一图像传感器获得第一图像数据。

此外，作为另一示例，第一图像传感器上的每个像素的大小不同于第二图像传感器上的每个像素的大小，并且第一图像传感器上的像素数量也不同于第二图像传感器上的像素数量。也就是说，例如，第一图像传感器上的每个像素的大小大于第二图像传感器上的每个像素的大小，并且第一图像传感器上的像素数量小于第二图像传感器上的像素数量。在该情况下，例如，典型地以低帧速率对第二图像传感器的所有像素进行读出操作，以便从第二图像传感器获得第二图像数据。此外，还在该情况下，例如，典型地以高帧速率对第一图像传感器的所有像素进行读出操作，以便从第一图像传感器获得第一图像数据。