[发明专利]3D数据生成装置、3D数据再现装置、控制程序以及记录介质

说明书

为了基于深度生成高清的3D模型，深度需要一定的分辨率，但在使用现有编解码器对深度图像进行编码的情况下，根据拍摄对象的大小、动作的不同，有时深度的动态范围宽，分辨率不足。输入表示一个或多个拍摄对象的三维形状的深度图像来生成3D数据的3D数据生成装置，具备：深度分割部，将上述深度图像分割为由矩形区域构成的多个部分深度图像；深度整合部，对上述多个部分深度图像进行封装，生成整合深度图像；深度图像编码部，对上述整合深度图像进行编码；以及附加信息编码部，对附加信息进行编码，该附加信息包括确定上述矩形区域的分割信息以及表示上述封装的信息。

技术领域

本发明的一个方案涉及输入表示拍摄对象的三维形状的深度图像来生成3D数据的3D数据生成装置、3D数据生成方法、控制程序以及记录介质。

背景技术

在CG(Computer Graphics；计算机图形)领域中，研究了通过整合输入深度来构建3D模型(三维模型)的称为动态融合(DynamicFusion)的方法。动态融合的目的主要在于构建从拍摄到的输入深度中实时去除噪声的3D模型。在动态融合中，在补偿了三维形状的变形的基础上，将从传感器获取到的输入深度整合到通用的参照3D模型中。由此，能根据低分辨率和高噪声的深度生成精密的3D模型。

此外，在专利文献1中公开了通过输入多视点彩色图像和按像素级别对应的多视点深度图像来输出任意视点的图像的技术。

现有技术文献

专利文献

专利文献1：日本公开专利公报“日本特开2013-30898号公报”

发明内容

发明要解决的问题

为了基于深度生成高清的3D模型，深度需要一定的分辨率，但在使用现有编解码器对深度图像进行编码的情况下，根据拍摄对象的大小、动作的不同，有时深度的动态范围宽，分辨率不足。

技术方案

为了解决上述课题，本发明的一个方案的3D数据生成装置是输入表示一个或多个拍摄对象的三维形状的深度图像来生成3D数据的3D数据生成装置，具备：深度分割部，将上述深度图像分割为由矩形区域构成的多个部分深度图像；深度整合部，对上述多个部分深度图像进行封装，生成整合深度图像；深度图像编码部，对上述整合深度图像进行编码；以及附加信息编码部，对附加信息进行编码，该附加信息包括确定上述矩形区域的分割信息以及表示上述封装的信息。

为了解决上述课题，本发明的一个方案的3D数据再现装置是输入3D数据来再现一个或多个拍摄对象的三维形状的3D数据再现装置，具备：深度图像解码部，对上述3D数据所包括的整合深度图像进行解码；附加信息解码部，对附加信息进行解码，该附加信息包括表示由上述整合深度图像所包括的矩形区域构成的多个部分深度图像的封装的信息以及确定上述矩形区域的分割信息；深度提取部，基于表示上述封装的信息从上述已解码的整合深度图像中提取部分深度图像；以及深度耦合部，基于上述分割信息对上述多个部分深度图像进行耦合，重构深度图像。

有益效果

根据本发明的一个方案，即使在拍摄对象的深度的动态范围宽的情况下，也能使用现有编解码器来生成量化误差小的3D数据。

附图说明

图1是表示本发明的实施方式1的3D数据生成装置的构成的功能框图。

图2是表示本发明的实施方式1的整合深度图像生成部以及整合彩色图像生成部的内部构成的功能框图。

图3是示出本发明的实施方式1的深度图像以及彩色图像的获取例的图。

图4是示出本发明的实施方式1的深度图像获取部所输出的深度图像以及彩色图像获取部所输出的彩色图像的一个示例的图。

图5是示出本发明的实施方式1的深度图像的分割例的图。

图6是示出本发明的实施方式1的深度图像以及彩色图像的封装的示例的图。

图7是示出本发明的实施方式1的彩色图像的分割例的图。