[发明专利]信息处理设备和信息处理方法

权利要求书

1.一种信息处理设备，包括：

处理电路，被配置为

基于对象的多视角图像中的至少两个图像，得出所述对象的视差图；

利用预先训练的分类器估计所述视差图中的视差值的置信度；以及

基于置信度高于预定水平的基准像素的视差值，对所述视差图进行优化处理。

2.根据权利要求1所述的信息处理设备，其中，所述优化处理包括：基于所述基准像素的位置划分所述视差图的区域，以及针对所述视差图的不同区域独立地进行所述优化处理。

3.根据权利要求2所述的信息处理设备，其中，所述优化处理包括：

根据所述基准像素的位置对所述视差图进行三角剖分；

针对以所述基准像素为顶点的三角形区域分别确定能量函数；以及

基于所确定的能量函数优化相应三角形区域内的像素的视差值。

4.根据权利要求1所述的信息处理设备，其中，所述分类器是利用最小二乘推进算法基于训练图像得到的。

5.根据权利要求1所述的信息处理设备，其中，得出所述对象的视差图包括：

对于所述多视角图像中的第一图像中的目标像素，计算所述多视角图像中的第二图像中的预定范围内的像素与所述目标像素的匹配度；以及

根据所述匹配度确定所述目标像素在所述第二图像中的对应像素，从而确定所述目标像素的视差值。

6.根据权利要求5所述的信息处理设备，其中，通过基于零均值归一化互相关的块匹配来计算所述匹配度。

7.根据权利要求6所述的信息处理设备，其中，基于以下特征中的一个或更多个进行所述分类器的训练以及所述置信度的估计：

所述块匹配的最小成本；

所述块匹配的最小成本与次小成本之间的差；

针对所述第一图像中的目标像素确定的视差值与针对所述第二图像中的对应像素确定的视差值之间的差；以及

某像素的视差值与该像素的邻近像素的中值视差之间的差。

8.根据权利要求1所述的信息处理设备，其中，所述处理电路还被配置为将置信度高于预定水平的像素中满足以下条件的像素确定为所述基准像素：

该像素的邻近像素中包含至少预定数量个视差值与该像素的视差值之差小于预定阈值的像素。

9.根据权利要求1至8中任一项所述的信息处理设备，其中，所述处理电路还被配置为：

基于经所述优化处理的视差图生成所述对象的深度图。

10.根据权利要求9所述的信息处理设备，其中，所述深度图的生成包括：根据经所述优化处理的视差图，基于相机参数，生成所述深度图。

11.根据权利要求1至8中任一项所述的信息处理设备，还包括：

一个或更多个图像获取装置，被配置为拍摄所述多视角图像。

12.根据权利要求9所述的信息处理设备，其中，所述处理电路还被配置为：基于所述深度图，识别所述对象的表情、动作或手势，以及基于所识别的表情、动作或手势生成相应的操作指令。

13.根据权利要求9所述的信息处理设备，其中，所述处理电路还被配置为：基于所述深度图，进行虚拟视点绘制，或者生成用于增强现实的视觉信息。

14.根据权利要求9所述的信息处理设备，其中，所述处理电路还被配置为：

基于所述深度图，进行所述对象的三维重建过程，其中所述三维重建过程包括所述对象的截断符号距离场生成，深度融合和纹理映射中的至少一种。