[发明专利]一种实现全景图像的实时预览的方法和装置

说明书

技术领域

本发明涉及电子领域，特别涉及一种实现全景图像的实时预览的方法和装置。

背景技术

随着数字成像技术的迅速发展，数字成像设备得到了越来越广泛的应用。然而，由于数字成像设备自身的限制，使得数字图像和视频的视场宽度不能满足用户所希望得到广角图像甚至全景图像的应用要求。为了建立无缝广角图像人们使用面向硬件的方法(如反/折射系统、鱼眼透镜等)，借助新增的硬件辅助数字成像设备从而得到广角图像，采用该方式，由于鱼眼透镜等通常是在有限的成像面上捕获尽可能多的信息，这样就会导致图像的严重失真。现有技术还提供了一种数字拼接图像技术，可以由输入图像集合智能地建立景物或场景的广角表现形式，该方式下可以由多幅原始输入图像快速地建立一幅高分辨率的拼接图像，该拼接图像不仅具有较好的景物的全局影像，而且还保留了原始图像中的细节信息。但是在原始输入图像中由于光照条件等变化或相机自动曝光机制等原因造成得到拼接图像中会存在缝隙，为了有效的解决该类缝隙问题，现有技术提出了一种全景图拼接(Panoramic Mosaic)技术，即将在一个固定观测点拍摄的图像序列拼接在一起形成一个广角甚至360度视野的图像。这种方法通常被用于互联网上的虚拟漫游，登入网站的游客可以浏览真实世界中景物的全景影像。

发明人在实现本发明的过程发现，上述现有技术至少存在如下缺点和不足：

现有技术提供的全景图拼接技术只能实现针对二维图像的拼接，随着用户的使用要求越来越高，该技术不能达到用户希望拼接三维立体图像的目的，进而无法满足用户得到全景三维立体图像的需求。再者，该现有技术是一个图像后处理过程，用户并不能确切知道场景是否足够被拍摄或覆盖到，并且只能在在拍摄了所有的图像后才知道全景图像的效果如何；对于拼接，若在拼接过程中原始图像之间无重叠区域，则最终得到的全景图像中将出现带沟，而这个带沟只能在最后才能看见，将导致用户又得重新拍摄场景，重新进行拼接，费时费力；并且拼接时由于拍摄或技术原因导致拼接效果不佳，不能随时校正，随时拼接，给用户体验带来遗憾。

发明内容

为了实现图像的拼接(特别是实现三维立体图像的拼接)，并且能够实现图像的实时拼接、实时显示、实时预览，从而供用户能够自由地选择的全景三维立体图像，本发明实施例提供了一种全景图像的实时预览的方法和装置。所述技术方案如下：

一方面，提供了一种实现全景图像的实时预览的方法，所述方法包括：

获取当前场景的二维图像；

获取所述二维图像的深度图；

根据所述当前场景的二维图像、所述当前场景的上一个场景的二维图像，以及所述当前场景的二维图像的深度图、所述当前场景的上一个场景的二维图像的深度图、进行所述当前场景和所述当前场景的上一个场景的预拼接，生成预拼接的宽景三维立体图像；并显示所述预拼接的宽景三维立体图像以供所述用户预览；

当接收到用户的确认信号后，则将所述宽景三维立体图像拼接，且继续获取所述当前场景的下一个场景的三维立体图像，直到获取到全景三维立体图像为止。

再一方面，提供了一种实现全景图像的实时预览的方法，所述方法包括：

获取当前场景的二维图像；

将所述当前场景的二维图像和所述当前场景的上一个场景的二维图像进行所述当前场景和所述当前场景的上一个场景的实时预拼接，生成预拼接的宽景二维图像；并显示所述预拼接的宽景二维图像以供所述用户预览；

当接收到用户的确认信号后，则将所述宽景二维图像拼接，继续获取所述当前场景的下一个场景的二维图像，直到获取到全景二维图像为止。

再一方面，提供了一种实现全景图像的实时预览的装置，所述装置包括：

第一获取模块，用于获取当前场景的二维图像；

第二获取模块，用于获取所述第一获取模块获取的二维图像的深度图；

预拼接模块，用于根据所述当前场景的二维图像、所述当前场景的上一个场景的二维图像、以及所述当前场景的二维图像的深度图、所述当前场景的上一个场景的二维图像的深度图，进行所述当前场景和所述当前场景的上一个场景的实时预拼接，生成预拼接的宽景三维立体图像；

显示模块，用于显示所述预拼接模块得到的预拼接的宽景三维立体图像以供所述用户预览；

拼接模块，用于当接收到用户的确认信号后，则将所述宽景三维立体图像拼接，且继续获取所述当前场景的下一个场景的三维立体图像，直到获取到全景三维立体图像为止。

再一方面，提供了一种实现全景图像的实时预览的装置，所述装置包括：