[发明专利]用立体相机进行暗闪光灯拍照

权利要求书

1.一种用于拍照的设备，包括：

第一相机；

第二相机；和

控制器，其可操作地联接到第一相机和第二相机，其中该控制器包括至少一个处理器，该至少一个处理器被编程为执行控制器操作，所述控制器操作包括：

同时操作：

第一相机以基于可见波长的光生成场景的可见光图像；和

第二相机以基于不可见波长的光生成场景的不可见光图像；以及

将可见图像信息和不可见图像信息应用于人工神经网络以生成增强的可见光图像、与可见光图像相关联的可见图像信息、以及与不可见光图像相关联的不可见图像信息,

其中，使用训练数据集训练所述人工神经网络，所述训练数据集包括：

多个自然场景的长时间曝光可见光图像；

多个自然场景的弱光可见光图像；和

与弱光可见光图像同时拍摄的多个自然场景的不可见闪光灯照射的不可见光图像。

2.根据权利要求1所述的设备，其中，所述长时间曝光可见光图像是所述训练数据集的地面真实输出。

3.根据权利要求1所述的设备，其中，所述人工神经网络包括卷积人工神经网络。

4.根据权利要求1所述的设备，其中，所述控制器操作还包括在同时捕获所述可见光图像和所述不可见光图像期间，操作闪光灯以用不可见波长的光照射所述场景。

5.根据权利要求1所述的设备，其中，所述不可见波长包括红外波长。

6.根据权利要求1所述的设备，其中，所述不可见波长包括紫外波长。

7.根据权利要求1所述的设备，其中，所述不可见图像信息包括不可见光图像中的内容的结构信息。

8.根据权利要求7所述的设备，其中，所述结构信息包括所述内容的大小、所述内容的形状、所述内容的纹理或所述内容的位置中的至少一项。

9.根据权利要求1所述的设备，其中，所述可见图像信息包括可见光图像中的内容的着色信息。

10.一种用于拍照的方法，包括：

在控制器处操作第一相机以基于可见波长的光生成场景的可见光图像；

操作第二相机以基于不可见波长的光生成场景的不可见光图像，第二相机和第一相机同时操作；和

将可见图像信息和不可见图像信息应用于人工神经网络以生成增强的可见光图像、与可见光图像相关联的可见图像信息、以及与不可见光图像相关联的不可见图像信息，

其中，使用训练数据集训练所述人工神经网络，所述训练数据集包括：

多个自然场景的长时间曝光可见光图像；

多个自然场景的弱光可见光图像；和

与弱光可见光图像同时拍摄的多个自然场景的不可见闪光灯照射的不可见光图像。

11.根据权利要求10所述的方法，其中，所述长时间曝光可见光图像是所述训练数据集的地面真实输出。

12.根据权利要求10所述的方法，其中，所述人工神经网络包括卷积人工神经网络。

13.根据权利要求10所述的方法，还包括在同时捕获所述可见光图像和所述不可见光图像期间，操作闪光灯以用不可见波长的光照射场景。

14.根据权利要求10所述的方法，其中，所述不可见波长包括红外波长或紫外波长。