[发明专利]数据处理系统

说明书

本公开涉及数据处理系统，具体地，在包括场序彩色显示器的数据处理系统中，当在场序彩色显示器上显示要基于预测观看方位变换的帧时，基于该帧的、要在显示器上显示的各色场的预测观看方位(186)来变换(184)该特定色场，使得各色场将经受与帧的其他色场不同的观看方位变换。然后在显示器上顺序地显示这样变换后的色场，以便显示帧。

技术领域

本发明涉及数据处理系统，具体涉及在显示器上显示图像的数据处理系统的操作。

背景技术

图1示出了示例性数据处理系统14，该数据处理系统14包括：主处理器，该主处理器包括中央处理单元(CPU)7；图形处理单元(GPU)2；视频编解码器1；照相机2；图像信号处理器(ISP)13；显示处理器5；以及存储控制器8。如图1所示，这些单元经由互连部通信并访问片外存储器3。在该系统中，GPU 2、视频编解码器1、ISP 13和/或CPU 7将生成要显示的帧(图像)，并且显示处理器5然后将向显示器4提供这些帧，以便显示。对于系统的剩余部分，显示器4可以是本地的或远程的，并且可以具有到显示处理器5的有线或无线连接。

在该系统的使用中，在主处理器(CPU)上执行的、诸如游戏这样的应用例如将需要在显示器4上显示帧。为此，应用10将向在CPU 7上执行的图形处理单元2的驱动器11提交适当的命令和数据。驱动器11然后将生成适当的命令和数据，以使得图形处理单元2渲染用于显示的适当帧，并且将这些帧存储在适当的帧缓冲器中(例如，在主存储器3中)。显示处理器5然后将把这些帧读取到用于显示器的缓冲器中，从该缓冲器，然后读出这些帧并在显示器4的显示面板上显示这些帧。

显示帧还可以或相反例如借助缓存从产生帧的处理单元(例如，GPU 2或ISP 13)以串流方式传输到显示处理器(如果期望)。

诸如图1所例示的数据处理系统这样的数据处理系统14的使用的示例是，提供增强现实(AR)和/或虚拟现实(VR)头戴式显示器(HMD)系统。(在这种情况下，显示器4将为某种头戴式显示器。)

在头戴式AR/VR显示器操作中，响应于来自需要增强现实或虚拟现实显示器的、诸如游戏(例如，在CPU 7上执行)这样的应用的适当命令和数据，例如将由图形处理单元2渲染要向各眼睛显示的适当图像。GPU 2例如将渲染要以与显示器的刷新率匹配的、诸如每秒30帧的速率显示的图像。

在这种结构中，系统还将工作为跟踪用户的头部/注视的移动(所谓的头部姿态跟踪)。该头部方位(姿态)数据然后用于确定实际上应如何对于用户当前的头部位置(观看方向)向用户显示图像，并且因此(例如通过基于头部方位数据设置照相机(视点)方位)渲染图像(帧)，使得可以显示基于用户当前的观看方向的适当图像。

虽然将可以在渲染要在AR/VR系统中显示的帧的开始时简单地确定头部方位(姿态)，但由于渲染处理中的时延，可能为以下情况：用户的头部方位(姿态)在帧的渲染开始时的与实际上显示(向显示面板扫描输出)帧时的头部方位(姿态)之间变化。

为了允许这一点，基于在帧的渲染开始时感测的头部方位数据渲染要显示的帧，但然后在实际显示帧之前，基于将向用户实际显示帧时的预期头部方位重新投影帧。预期头部方位例如可以基于用户在渲染帧的时间与将实际显示帧的时间之间的预测头部移动。然后显示帧的重新投影版本。这允许在显示器上显示的图像更紧密地匹配用户(预测的)当前头部方位。

为了进行该处理，将初始“应用”帧渲染到存储器中的适当缓冲器中，但然后存在第二渲染处理，该第二渲染处理取得存储器中的初始应用帧，并且使用预测的头部方位(姿态)信息来渲染考虑预期头部方位的初始已渲染帧的“重新投影”版本，以提供将向用户显示的帧。这通常涉及基于预测的头部方位(姿态)的、对帧的某一形式的变换。然后可以将实际上要显示的、这样变换的(重新投影的)已渲染帧写入到存储器中的另外缓冲器中，然后由显示处理器从缓冲器读出帧，以便显示。