[发明专利]用于处理外围图像的方法和设备

说明书

公开了用于处理在显示时扩展到中心图像的边界之外的至少一个外围图像的方法。该方法包括将外围图像的亮度调整到人类视觉特性，其中处理外围图像的亮度使得从观看者的视场中的外围图像发出的呈现的光保持为低，并接近于仅通过中心视图呈现的光。根据第一实施例，该方法包括：通过将光校正函数应用到输入亮度，将外围图像的亮度调整到参考反射率水平，其中这样的光校正函数是通过测量调整到显示外围图像的表面的参考反射率水平的显示的外围图像的呈现的亮度水平得到的。根据第二实施例，进一步调节亮度到关于参考反射率的真实反射率。根据第三实施例，增加外围图像中移动对象的亮度。

1.技术领域

在下文中，公开了一种用于处理图像的设备和方法。特别地，公开了一种用于处理扩展到中心图像的边界之外的至少一个外围图像的设备和方法。

2.背景技术

本节旨在向读者介绍本领域的各个方面，这可能与以下描述和/或要求保护的本原理的各个方面有关。这种讨论被认为有助于向读者提供背景信息，以便更好地了解本原理的各个方面。因此，应当理解，将以这个角度理解这些叙述，而不作为现有技术的承认。

今天的电影大多是仅用于中心屏幕而产生的。为了改善用户体验，将额外的内容投影在电视或电影院屏幕的周围，从而扩展用户周围的原始场景。这样通过填充观众视野的系统增强了用户的沉浸感，即，其给予用户更好的在场景中的感觉。例如，使用宽视角的相机、用于110到360捕获的摄像机平台捕获这样的内容或者使用计算机生成的图像来创建这样的内容。

然而，以与原始视频一致的方式扩展视频内容并且在视觉上令人满意是困难的。

在扩展视频内容的方法中，第一种是利用宽视角的捕获额外的内容。然而，至少因为后期制作需要管理更多的图像(中心和侧面图像)，这样的技术需要大量的人工工作。此外，因为它旨在改善用户体验，扩展需要特别的注意，不应当打扰或为观众制造麻烦。

用于扩展视频内容的简单技术是Philips的技术Ambilight，在WO2004/006570中公开，其研究了在中心图像中颜色的分布，并使用安装在屏幕边缘上的RGB LED将图像的主要颜色投影在屏幕周围。光投影仅在电视机周围有限的区域内在完成，并不提供背景、形状或运动印象的细节。然而，在高亮度图像的情况下，以颜色和光的形式符合内容这种扩展可能不是最佳的，因为这种技术增加了太多的背景光。扩展不应该打扰或为观众制造麻烦，因为其旨在改善用户体验。

用于扩展视频的另一种技术是AAides等人公开在“Multiscale ultrawidefoveated video extrapolation”(IEEE International Conference on ComputationalPhotography(ICCP)2011，第1-8页)中的技术。算法的关键思想是在空间和时间维度上使用补丁匹配(Patch-Match)算法(使用视频立方体，而不是图像块)将视频外推到其边界之外。当选择正确的补丁时，该方法会不利于(penalize)可能导致分心的补丁。此外，由于人类视觉对偏离眼睛中心越远的细节越不敏感，所以算法以不同的分辨率计算。当以从更粗糙的分辨率到更高分辨率完成外推时，得到最好的结果。然而，使用这样的技术，因为扩展的大小受到限制，可能不能填充用户的全部视场。此外，对于其他计算机生成的图像，可能不能保留艺术意图。实际上，用户可能会因侧面的图像而分散注意力，或者观看条件的修改可能太有吸引力。

因此，即使扩展对于沉浸性而言是理想的，扩展可能不适合于舒适的观看体验，特别是当扩展的投影引起太多的光时。因此需要一种处理扩展内容以便改善用户体验的方法。

3.发明内容

根据本原理，描述了其中处理外围图像的亮度的实施例，使得来自观看者视野中的外围图像的光保持为低。换句话说，周边视图的亮度减小，使得当显示视图时，通过中心视图和周边视图呈现的全局亮度保持在接近仅通过中心视图呈现的亮度。

为此，公开了一种用于处理扩展中心图像的边界的至少一个外围图像的方法。该方法包括基于人类视觉特性调整外围图像的亮度。