[发明专利]一种提供增强现实的方法及终端

说明书

技术领域

本发明涉及增强现实技术领域，尤其是通过播放视频来提供增强现实的方法及终端。

背景技术

增强现实（Augmented Reality，简称AR），是在虚拟现实的基础上发展起来的新技术，也被称之为混合现实或扩张实境等。是通过计算机系统提供的信息增加用户对现实世界感知的技术，将虚拟的信息内容叠加到真实世界的场景中，从而实现对现实的增强。随着带有摄像头的智能移动终端的迅速普及，各种增强现实应用也层出不穷，广泛应用于娱乐、生活、医学、广告和教育等领域。增强现实系统中的平面目标一般有基于人工的标记（Marker），和自然图像，有些先进的AR系统也支持三维目标。在AR应用通过摄像头检测到场景中有目标存在时，可以在显示的目标区域之上叠加一些虚拟内容，如3D模型是最常见的形式。

随着三维图形技术在移动终端上的进步，一些新的终端已经可以支持输出视频帧画面作为纹理渲染。目前有AR应用将一段视频的首帧画面作为目标图像，在终端屏幕显示的场景中的目标图像区域之上播放视频，实现让静止图像动起来的魔幻效果，是一种很好的增强现实的表现形式。但是在实践中发现，如果视频位于终端本地，一般效果都很好，然而对于实时播放网络视频时，场景中的目标区域在开始播放时会出现短暂的黑色区域，虽然时间比较短，但使增强现实的视觉效果变得不连续，严重影响增强现实的效果和用户体验。另外对于终端本地视频，如果视频较大，并且没有预先加载，而是发现目标时再加载，画面上也可能会出现短暂的黑色区域。如图1所示，黑色色块区域101其实应该就是视频播放显示的区域，区域的形状一般是四边形，但不一定是矩形，与目标在场景中的位置和姿态有关，一般区域之下就是目标图像。

虽然可以提前下载网络视频，以及预先加载视频内容，使黑色区域的出现变得短暂的几乎不可见，然而很多应用场合有大量的视频内容，不可能全部下载到本地，预先都加载进来，因此必须从根本上彻底解决AR视频播放开始时可能出现黑色区域的问题。

发明内容

基于现有技术的不足，本发明的首要目的在于给出一种提供增强现实的方法，避免在场景中开始播放视频时短暂出现黑色区域，尤其是播放网络视频。

本发明的再一目的在于给出一种提供增强现实的终端，避免在场景中开始播放视频时短暂出现黑色区域，尤其是播放网络视频。

为实现上述各目的，本发明采用如下技术方案：

本发明第一目的所称提供增强现实的方法，包括步骤：

终端通过摄像头获取当前场景图像，并将其显示在终端屏幕上；

在所述当前场景图像中检测到有目标存在；

加载与所述目标对应的视频内容；

播放所述视频内容；

获取所述视频当前帧画面的位置；

当所述帧画面的位置大于零时，才将帧画面渲染叠加到终端屏幕上显示的场景中；

随着视频的播放进度，将后续的帧画面更新渲染叠加到场景中；

所述帧画面在场景中的显示区域根据所述目标的尺寸和当前姿态数据确定。

进一步，在所述当前场景图像中检测到有目标存在后，将一张静态图片作为纹理渲染叠加到场景的目标区域上；

同时加载和播放所述目标对应的视频内容；

在所述视频播放的帧画面的位置大于零时，使用所述视频帧画面渲染叠加到场景的目标区域上。

进一步，所述目标的类型为标记，所述标记包括黑色矩形边框，在所述黑色矩形边框的其中一边区域中包含反色的一维条形码；

在所述当前场景图像中检测到有目标标记存在时，截取当前场景图像中所述目标标记的黑色矩形边框的边区域；

对所述边区域先进行反色处理，然后从中检测并解析一维条形码；

根据所述条形码的解析结果加载并播放对应的视频内容；

当获取所述视频的帧画面的位置大于零时，将帧画面渲染叠加到终端显示场景中的目标区域上。

进一步，预先设置视频区域与目标区域的偏移参数，所述偏移参数包括视频区域相对目标区域的尺寸比例，以及中心点的偏移向量；

在所述当前场景图像中检测到有目标存在，播放视频的帧画面的位置大于零时，根据所述目标的当前位置以及预设的所述偏移参数确定视频区域，将所述视频的帧画面渲染叠加到相应位置的视频区域上显示。

进一步，在所述当前场景图像中检测到所述视频对应的目标消失预定时长后，暂停播放所述视频，并记录视频播放的当前位置；