[发明专利]一种图像显示的方法及电子设备

说明书

本申请涉及终端技术领域，公开了一种图像显示的方法及电子设备，用以在不提高成本的基础上提高用户的观看体验。方法包括：电子设备在第一显示时间在显示屏上显示增强图像；增强图像为根据摄像头在第一采集时间采集的场景图像处理得到的图像；在第二显示时间在显示屏上显示第一插帧图像；第一插帧图像为根据运动传感器在第二采集时间采集的运动状态信息，以及所述第二显示时间与所述二采集时间的时差值，预测到所述运动传感器的位姿信息后，根据所述位姿信息，预测对应的投影矩阵；以及根据所述投影矩阵和所述增强图像预测得到的，所述第一采集时间与所述第二采集时间相同或相近。

技术领域

本申请实施例涉及终端技术领域，尤其涉及一种图像显示的方法及电子设备。

背景技术

近年来，随着科技的发展，混合现实(mixed reality，MR)技术的应用越来越广泛，MR是虚拟现实技术的进一步发展，MR技术通过在现实场景中添加虚拟场景信息，以增强用户体验的真实感。

基于人眼的构造，人眼可分辨的频率通常在120hz。当显示屏上视频刷新的帧率在90fps-120fps左右时，用户观看体验较佳。现有的MR头戴式显示设备的显示屏上视频刷新的帧率通常与MR头戴式显示设备的摄像头采集图像的采集帧率相同。而目前的MR头戴式显示设备上的摄像头的采集帧率一般为30fps，相比90fps低的太多。用户开始使用MR头戴式显示设备时，由于MR头戴式显示设备的显示屏上视频刷新的帧率远低于人眼可分辨的频率，导致用户人眼不能适应较低视频刷新的帧率(30fps)，出现眩晕的感觉，用户观看体验差。为了提高视频刷新帧率，可以在MR头戴式显示设备上安装高帧率的摄像头，这样不仅导致成本增加，并且高帧率的摄像头拍摄的图像的数量也增加，给MR头戴式显示设备中的软件处理增加了较大的负担。

发明内容

本申请实施例提供了一种图像显示的方法及电子设备，用以在不提高成本的基础上提高用户的观看体验。

第一方面，提供了一种图像显示的方法，所述方法包括：电子设备在第一显示时间在显示屏上显示增强图像；所述增强图像为所述电子设备根据摄像头在第一采集时间采集的场景图像处理得到的图像，所述第一显示时间晚于所述第一采集时间；所述电子设备在第二显示时间在所述显示屏上显示第一插帧图像；所述第二显示时间晚于所述第一显示时间；所述第一插帧图像为所述电子设备根据运动传感器在所述第二采集时间采集的运动状态信息，以及所述第二显示时间与所述二采集时间的时差值，预测到所述运动传感器的位姿信息后，根据所述位姿信息，预测对应的投影矩阵；以及根据所述投影矩阵和所述增强图像预测得到的，所述第一采集时间与所述第二采集时间相同或相近。

本申请中，通过根据摄像头采集的场景图像生成的增强图像来预测插帧图像，并在显示屏上显示插帧图像，在不提高摄像头的采集帧率的情况下，可以提高显示屏的显示帧率，实现在不提高电子设备成本的基础上提高用户的观看体验。

在一种可能的实现中，所述电子设备还可以在第三显示时间在所述显示屏上显示第二插帧图像；其中，所述第三显示时间晚于所述第二显示时间；所述第二插帧图像可以是所述电子设备根据运动传感器在所述第二采集时间采集的运动状态信息，以及所述第三显示时间与所述二采集时间的时差值，预测到所述运动传感器的位姿信息后，根据所述位姿信息，预测对应的投影矩阵；以及根据所述投影矩阵和所述增强图像预测得到的；或者所述第二插帧图像可以是所述电子设备根据运动传感器在所述第三采集时间采集的运动状态信息，以及所述第三显示时间与所述第三采集时间的时差值，预测到所述运动传感器的位姿信息后，根据所述位姿信息，预测对应的投影矩阵；以及根据所述投影矩阵和所述第一插帧图像预测得到的，所述第三采集时间与所述第二显示时间相同或相近。

在本申请中，电子设备可以在相邻的两帧增强图像之间插入多帧插帧图像显示，插帧图像可以是根据增强图像预测生成的，也可以是根据已经生成并显示的插帧图像预测生成的，可以在进一步不提高摄像头的采集帧率的情况下，提高显示屏的显示帧率。