[发明专利]生成全景图像的装置、方法及由记录有运行该方法的程序的计算机可读取的记录介质

说明书

技术领域

本发明涉及生成全景图像的装置、方法及由记录有运行该方法的程序的计算机可读取的记录介质。更具体而言，涉及一种生成自然地融合了拼接区域的图像的全景图像的装置、方法及由记录有运行该方法的程序的计算机可读取的记录介质。

背景技术

过去，通过基于SLR(Single Lens Reflex，单镜头反光)相机的胶卷型图像拍摄等古典的装置及方法生成图像。但是，最近普遍利用电荷耦合器件(CCD，charge-coupled device)、互补金属氧化物半导体(CMOS，complementary metal oxide semiconductor)等光学传感器来生成数码图像。

基于这种数码光学装置的图像拍摄随着现代人的文化生活和领域的扩大，对其的利用更加扩大，对于多种辅助拍摄装置及数码图像的处理装置等的发展，随其发展得到飞越性的发展。

胶卷型图像拍摄装置及数码拍摄装置等图像拍摄装置基本上将通过镜头、光圈及快门等光学装置流入的光学信息显像到胶卷，或上述光学传感器转换生成为电能。但是，这种图像拍摄装置不可避免地受到面对被拍摄体的镜头的光角限制。

为了克服上述限制而开发有根据不同用途的多种镜头组，但是在镜头的物理特性上无法完全消除其限制。

一般来说，全景图像作为为了克服如上所述的物理限制引起的制约，来满足应用数码图像的使用人员的增加的多种需求而提出的一个方案，其表示利用相机的拍摄技法、相机镜头的焦点的变化及数码图像处理等，来扩大能够由镜头囊括被拍摄体的区域的图像。

即，将多个拍摄的图像以横向或纵向或它们的组合进行连接，形成一个宽大的图像，如此形成的图像被称为全景图像。

为了生成全景图像而提出的现有技术中的方法有如下方法：生成通过多角度存在的多个相机拍摄的多个图像的方法；在图像拍摄装置内，物理上调整镜头朝向被拍摄体的角度，生成进行角度调整的图像并合成为全景图像的方法等。

如上所述的装置或方法需要有额外的装备，并较大地受到使用人员的运用方法等主观因素的影响，且对于当前基本上提供图像拍摄功能的便携式终端机的便携化及小型化需求来讲，可以称其为不适合的方法。

最近，开发出便携式终端机中也能够生成全景图像的方法及装置。但是，在这种方法及装置中，检测两个以上的图像的拼接区域，并以拼接区域为基准结合为一个图像。但是，如上所述结合的全景图像存在有不自然的情况较多。

其原因可能在于将三维空间的被拍摄体转换为二维图像的过程中产生的失真，即，即使具有相同的长度，随着与图像传感器的距离增加而缩小显示的现象。除此之外，可能是因为拍摄图像装置的光学镜头的物理特性，即，直线显示为曲线的现象。并且，还可能是由于数码自动相机的自动曝光及自动白平衡，使得相同的物体也显示不同的亮度，或者表现为其它颜色。

这种失真及不自然的合成能够通过具有高运算能力的计算装置中运行的PC用程序，得到复原或自然地再转换。但是，具有有限的资源和有限的运算能力的便携式终端机中难以完整地解决如上的操作。

因此，尚未满足现代人对能够方便携带的图像拍摄装置上容易而简便地自然合成全景图像的方法的需求。

发明内容

为了解决上述问题，本发明的目的在于提供一种自然地融合原图像之间的拼接区域，从而生成自然的全景图像的装置及方法。

并且，为了在计算机中实现如上所述的方法，本发明的目的在于提供一种记录有由计算机可识别并运行的程序的记录介质。

为了达到上述目的，根据本发明的一个方面的全景图像生成装置包括：图像获取部，其依次获取多个图像；拼接区域获取部，作为上述多个图像中的某一个的第一图像和要与上述第一图像结合的第二图像相互重复的拼接区域，获取具有细部区域的上述拼接区域，上述细部区域是与作为上述第二图像结合于上述第一图像的方向的结合方向垂直地分割而形成的；以及全景生成部，其利用针对上述细部区域进行定义的加权函数，以上述细部区域为单位，融合(blending)而结合相当于上述第一图像的上述拼接区域的区域和相当于上述第二图像的上述拼接区域的区域，来生成全景图像。

根据上述全景图像生成装置的一例，上述全景生成部包括：拼接区域融合部，其利用相当于上述第一图像和上述第二图像的上述拼接区域的像素的颜色信息及通过上述加权函数计算的上述各个细部区域的加权值，来计算融合拼接区域；以及全景结合部，其将上述第一图像的不属于上述拼接区域的区域、上述融合拼接区域以及上述第二图像的不属于上述拼接区域的区域结合为上述全景图像。