[发明专利]图像数据处理系统和相关方法以及相关图像融合方法

说明书

技术领域

本发明是有关于图像处理，特别是有关于处理全景图像(panorama images)及其图像融合(image blending)的图像数据处理系统及其相关方法。

背景技术

随着计算机技术的发展，全景图像的应用越来越普及。全景图像为具有异常大视野(field-of-view,FOV)、夸张的长宽比(aspect ratio)、或其组合的图像。在全景图像中，不牺牲分辨率的情况下，多个图像可被组合或拼接(stitch)在一起以增加视野。全景图像有时也被称为“全景”，它能提供360度的场景图。然而，拼接图像涉及大量的技术和图像处理。

近来，电子装置，例如移动或手持装置，在技术上变得越来越先进和多功能。举例来说，移动装置可接受邮件消息，具有先进的地址簿管理应用，允许多媒体播放，以及具有各种其他功能。由于具有多功能的电子装置使用方便，这些电子装置成为生活的必需品。

由于用户需求和行为的改变，全景图像的应用已成为手持装置的必需品。社交网络服务器可执行图像拼接以产生360度全景图像，并在客户端提供有观看者浏览或预览的全景图像。目前，当在客户端的观看者请求自服务器浏览或预览360度全景图像时，整个360度全景图像可自服务器传送至客户端，然后客户端装置可获得360度全景图像的对应部分以基于本地观看者的视点和视角来显示。

然而，由于整个360度全景图像将被传送，以及360度全景图像的分辨率比4K更高，需要大量的传送带宽以及本地系统需要更强的计算能力以处理360度全景图像，由此消耗更大的功率。

相应地，需要处理全景图像的智能图像数据处理系统及相关方法来解决上述技术问题。

发明内容

有鉴于此，本发明提出一种图像数据处理系统和用于处理图像的相关方法以及图像融合的方法。

依据本发明一实施方式，提供一种在图像数据处理系统中的图像处理方法。该方法包括：接收多个源图像，其中该多个源图像至少包括多个重叠部分；接收浏览视点和视角信息；基于该浏览视点和该视角信息，确定该多个源图像的多个已裁剪图像；基于该多个源图像的该多个已裁剪图像，产生用于观看或预览的透视图像或全景图像。

依据本发明另一实施方式，提供一种在图像数据处理系统中融合第一图像和第二图像以产生融合图像的方法。该方法包括：基于该第一图像和该第二图像对应的内容，确定该第一图像和该第二图像之间的拼接缝；计算该拼接缝和该第一图像和该第二图像的至少一像素之间的距离，以产生距离图；以及根据该距离图，融合该第一图像和该第二图像，以产生已融合的图像。

依据本发明又一实施方式，提供一种图像数据处理系统。该图像数据处理系统包括：至少一图像输入接口，被配置为接收多个源图像，其中该多个源图像至少包括多个重叠部分；处理器，耦接于该至少一图像输入接口，被配置为自该至少一图像输入接口接收该多个源图像；接收浏览视点和视角信息；基于该浏览视点和该视角信息，确定该多个源图像的多个已裁剪图像；以及基于该多个源图像的该多个已裁剪图像，产生用于观看或预览的透视图像或全景图像。

依据本发明又一实施方式，提供一种在图像数据处理系统和耦接于该图像数据处理系统的云服务器之间执行处理图像的方法。其中，该云服务器存储多个源图像。该方法包括：在该云服务器端，自该图像数据处理系统接收浏览视点和视角信息；在该云服务器端，基于该浏览视点和该视角信息，确定该多个源图像的多个已裁剪图像；以及在该云服务器端，传输该多个源图像的该多个已裁剪图像至该图像数据处理系统；以使得根据自该云服务器接收该多个已裁剪图像，该图像数据处理系统基于该多个源图像的该多个已裁剪图像，产生用于观看或预览的透视图像或全景图像。

本发明提供的图像数据处理系统和用于处理图像的相关方法以及图像融合的方法，可降低消耗的功率。

附图说明

图1为根据本发明实施方式的图像数据处理系统的示意图。

图2为根据本发明实施方式的全景图像的处理方法的流程图，其中该全景图像由多个源图像形成。

图3为根据本发明另一实施方式的融合两个图像的方法的流程图。

图4为根据本发明实施方式的与用户透视视点和视角一致的源图像、源图像的全景图像和裁剪区域。

图5A为根据本发明实施方式的地理坐标旋转和传感器旋转的结果的示意图。

图5B为在地理坐标旋转中使用的投影平面的示意图。

图5C为根据本发明实施方式的在传感器中使用的投影平面的示意图。