[发明专利]实时的多视图合成器

摘要

一种实时的多视图合成器，其能减少闪烁。通过立体匹配从立体图像产生第一深度图。当立体匹配比较差或帧到帧的变化太大时，视差备选就选择从单视点图像产生的不经过立体匹配的第二深度图，这有效防止立体匹配误差而产生可见的失真和闪烁。平坦的或无纹理区域可以使用第二深度图，而具有较好立体匹配的区域就使用第一深度图。深度图被延迟一帧并被缓冲。当选中的最低代价像素位置在前后两帧间的位移在阈值范围内时，低代价像素时间一致性调整机制将前一步所计算的代价值进一步降低。一致性混合视图合成对于较少视图使用前向映射，对于较多视图，从前向映射结果中进一步使用后向映射。旋转掩模是后向映射实时产生的。

主权项

一种实时的多视图合成器，包括：第一深度生成器，其通过立体匹配第一立体视图和第二立体视图而生成第一深度图；一致性检测器，其产生一个立体匹配率，所述立体匹配率表示所述第一深度图的质量，一致性检测器通过比较以所述第一立体视图为起始匹配得到的像素位置和以所述第二立体视图为起始匹配得到的像素位置，产生所述立体匹配率；第二深度生成器，其从不超过一个的单视点图像中产生第二深度图；视差备用选择器，当所述立体匹配率小于一个匹配阈值时，所述视差备用选择器选择所述第二深度图而不是所述第一深度图作为一个选中的深度图；前向映射器，其将源图像中的子像素移动一个偏移量，以产生一个目标图像，所述偏移量是从所述选中的深度图中读取或产生的，对于作为目标图像的多视图中的各个视图，其所述偏移量被缩放到不同的值；后向映射器，其读取多个视图掩模，以找到一个选中的视图掩模，所述选中的视图掩模在所述目标图像中产生一个子像素位置，所述后向映射器对所述选中视图掩模使用一个视图偏移量，在所述源图像中找到一个源子像素，所述后向映射器通过拷贝所述源子像素到所述目标图像的所述子像素位置上，生成所述目标图像。