[发明专利]图像生成设备、图像生成方法和计算可读存储介质

说明书

目的是在具有多个摄像单元的图像处理系统中能够生成从高质量的虚拟视点的宽区域图像。为了实现该目的，在图像处理系统中提供用于基于多个摄像装置获得的多个拍摄图像来生成虚拟视点图像的生成设备，多个摄像装置被分类为包括由指向第一注视点的多个摄像装置构成的第一摄像装置组和由指向不同于第一注视点的第二注视点的多个摄像装置构成第二摄像装置组的多个摄像装置组，生成设备包括：第一获得单元，用于基于属于第一摄像装置组的摄像装置获得的拍摄图像来获得第一图像数据；第二获得单元，用于基于属于第二摄像装置组的摄像装置获得的拍摄图像来获得第二图像数据；第三获得单元，用于获得与虚拟视点的位置和方向有关的信息；以及生成单元，用于基于第一获得单元获得的第一图像数据、第二获得单元获得的第二图像数据、第三获得单元获得的与虚拟视点的位置和方向有关的信息来生成虚拟视点图像。

技术领域

本发明涉及生成设备、生成方法和程序。

背景技术

将多个照相机(摄像设备)分别安装在不同位置、从多个视点进行同步拍摄、并且通过使用通过该拍摄所获得的多个视点图像来生成虚拟视点图像的技术已引起关注。根据用于从多个视点图像生成虚拟视点图像的技术，例如，由于可以从各种角度观看足球或篮球的最精彩场景，因此与正常图像相比，能够给用户带来高的临场感。

专利文献1公开了：将多个照相机布置成围绕被摄体，利用这些照相机拍摄被摄体，并且使用这些照相机所获得的拍摄图像来生成并显示任意的虚拟视点图像。在专利文献1中，以体育场的中央点作为原点来确定世界坐标X、 Y和Z轴，并且向着原点安装多个照相机，使得原点在画面的中央。

现有技术文献

专利文献

专利文献1：日本特开2014-215828

发明内容

发明要解决的问题

在专利文献1所述的技术中，在以体育场的中央作为注视点来生成整个风景的情况下，正拍摄远离注视点的选手的照相机的数量少，并且此外，与注视点附近相比，该相关选手未聚焦。结果，例如，在生成通过从离视点远的一侧看台观看另一侧看台所获得的整个风景的情况下，由于到该侧选手的距离短因而应清楚可见的他/她的分辨率变低，从而他/她的轮廓变模糊，由此降低了3D(三维)模型的精度。由于该原因，该侧选手的图像质量下降，而离该侧选手更远的中央附近的选手的图像质量得以提高，使得损害了远近感并因此降低了临场感。

本发明是有鉴于这样的情形而完成的，并且本发明的目的是使得能够在具有多个摄像单元的图像处理系统中生成从高质量的虚拟视点的宽区域图像。

用于解决问题的方案

根据本发明的生成设备是一种生成设备，用于基于多个摄像装置所获得的多个拍摄图像来生成虚拟视点图像，所述多个摄像装置被分类为包括第一摄像装置组和第二摄像装置组的多个摄像装置组，所述第一摄像装置组由指向第一注视点的多个摄像装置构成，以及所述第二摄像装置组由指向不同于所述第一注视点的第二注视点的多个摄像装置构成，所述生成设备的特征在于包括：第一获得单元，其被配置为基于属于所述第一摄像装置组的摄像装置所获得的拍摄图像来获得第一图像数据；第二获得单元，其被配置为基于属于所述第二摄像装置组的摄像装置所获得的拍摄图像来获得第二图像数据；第三获得单元，其被配置为获得与虚拟视点的位置和方向有关的信息；以及生成单元，其被配置为基于所述第一获得单元所获得的所述第一图像数据、所述第二获得单元所获得的所述第二图像数据、以及所述第三获得单元所获得的与虚拟视点的位置和方向有关的信息，来生成所述虚拟视点图像。

发明的效果