[发明专利]图像处理装置、3D模型生成方法和程序

说明书

本技术涉及图像处理装置、3D模型生成方法和程序，其使得能够在用于生成3D模型的多视点成像中减少成像失败的次数。该图像处理装置设置有：3D区域计算单元，其用于生成根据多个多视点图像生成的成像范围中的3D区域；以及确定单元，其基于通过将3D区域投影到特定视点而获得的区域图像以及来自与特定视点对应的成像设备的被摄体图像，来确定成像设备的被摄体成像状态。本技术可以应用于例如用于生成3D模型的图像处理装置等。

技术领域

本技术涉及图像处理装置、3D模型生成方法和程序，并且更具体地，涉及能够在用于3D模型生成的多视角图像捕获中减少失败图像捕获的图像处理装置、3D模型生成方法和程序。

背景技术

存在着以下技术：根据从多个视点捕获的运动图像来生成被摄体的3D模型，并且生成与任意观看/收听位置对应的3D模型的虚拟视点图像，以提供来自自由视点的图像。这种技术被称为体积捕获技术(volumetric capture technology)等。

在3D模型的生成中，使用了诸如可视外壳(Visual Hull)的方法(例如，参照专利文献1)，该方法利用来自不同方向的多个捕获图像来切出被摄体的三维形状。由于通过增加相机的数目来提高3D模型的精确度，因此优选地使用多个相机从不同方向捕获被摄体的图像。

引用列表

专利文献

专利文件1：WO 2018/150933 A

发明内容

本发明要解决的问题

然而，在相机的数目大的情况下，存在着当被摄体移动时被摄体在某个相机的图像捕获范围之外并且需要重新进行图像捕获的情况。

本技术是鉴于这样的情况而作出的，并且旨在减少用于3D模型生成的多视角图像捕获中的失败图像捕获。

问题的解决方案

根据本技术的一个方面的图像处理装置包括：生成单元，其生成根据多个多视角图像生成的图像捕获范围的3D区域；以及确定单元，其基于通过将3D区域投影到特定视点上而获得的区域图像以及来自与特定视点对应的图像捕获设备的被摄体图像，来确定图像捕获设备捕获被摄体的状况。

根据本技术的一个方面的3D模型生成方法是用于生成被摄体的3D模型的3D模型生成方法，并且包括：生成根据多个多视角图像生成的图像捕获范围的3D区域；基于通过将3D区域投影到特定视点上而获得的区域图像以及来自与特定视点对应的图像捕获设备的被摄体图像，来确定图像捕获设备捕获被摄体的状况；以及基于多个多视角图像来生成被摄体的3D模型。

根据本技术的一个方面的程序使计算机用作为：生成单元，其生成根据多个多视角图像生成的图像捕获范围的3D区域；以及确定单元，其基于通过将3D区域投影到特定视点上而获得的区域图像以及来自与特定视点对应的图像捕获设备的被摄体图像，来确定图像捕获设备捕获被摄体的状况。

在本技术的一个方面中，生成根据多个多视角图像生成的图像捕获范围的3D区域，并且基于通过将3D区域投影到特定视点上而获得的区域图像以及来自与特定视点对应的图像捕获设备的被摄体图像，来确定图像捕获设备捕获被摄体的状况。

注意，可以通过使计算机执行程序来实现根据本技术的一个方面的图像处理装置。由计算机执行的程序可以通过经由传输介质被发送或者通过被记录在记录介质上来提供。

图像处理装置可以是独立装置或构成一个装置的内部块。

附图说明

图1示出了应用本技术的图像处理系统的配置示例。

图2是描述图像处理系统的通知示例的图。

图3是示出图像处理装置的第一实施方式的配置示例的框图。