[发明专利]图像处理设备和图像处理方法

说明书

本公开内容涉及使得可以更容易地再现二维图像的图像处理设备和图像处理方法。生成包括块和不同于块的二维图像的视频帧，块是通过将三维形状的对象表示为点群的点云投影到二维平面上而获得的。所生成的视频帧被编码以生成比特流。本公开内容可以应用于例如图像处理设备、电子装置、图像处理方法、程序等。

技术领域

本公开内容涉及图像处理设备和图像处理方法，并且更具体地涉及允许更容易地再现二维图像的图像处理设备和图像处理方法。

背景技术

作为用于表示具有三维形状的对象的3D数据诸如点云的编码方法，常规地已经存在使用体素进行编码例如八叉树(Octree)(例如，参见非专利文献1)。

近年来，例如，已经提出了如下方法作为另一编码方法：在该方法(在下文中也称为基于视频的方法)中，将点云的位置信息和颜色信息中的每一个针对每个子区域投影到二维平面上并通过用于二维图像的编码方法对其进行编码(例如，参见非专利文献2至非专利文献4)。

如上所述被编码的3D数据例如作为比特流被发送并被解码。然后，具有三维形状的对象被再现为二维图像，如同利用在任意位置和取向的相机捕获的图像一样。

引文列表

非专利文献

非专利文献1：R.Mekuria，IEEE学生成员，K.Blom，P.Cesar.，成员，IEEE，“Design,Implementation and Evaluation of a Point Cloud Codec for Tele-ImmersiveVideo”，tcsvt_paper_submitted_february.pdf

非专利文献2：Tim Golla和Reinhard Klein，“Real-time Point CloudCompression”，IEEE，2015年

非专利文献3：K.Mammou，Video-based and Hierarchical Approaches PointCloud Compression，MPEG m41649，2017年10月

非专利文献4：K.Mammou，“PCC Test Model Category 2v0”，N17248MPEG outputdocument，2017年10月

发明内容

本发明要解决的问题

然而，在这样的再现方法的情况下，需要如同利用处于任意位置和取向的相机捕获图像一样对解码和重建的3D数据所指示的具有三维形状的对象进行渲染，并且存在处理负荷增加的可能性。

鉴于这样的情况做出了本公开内容，并且本公开内容旨在允许更容易地再现二维图像。

问题的解决方案

根据本技术的一个方面的图像处理设备包括：生成单元，其生成视频帧，该视频帧包括块(patch)和不同于块的二维图像，块是通过将具有三维形状的对象表示为点群的点云投影到二维平面上而获得的；以及编码单元，其对由生成单元生成的视频帧进行编码以生成比特流。

根据本技术的一个方面的图像处理方法包括：生成视频帧，视频帧包括块和不同于块的二维图像，块是通过将具有三维形状的对象表示为点群的点云投影到二维平面上而获得的；以及对所生成的视频帧进行编码以生成比特流。

根据本技术的另一方面的图像处理设备包括：提取单元，其从包括视频帧的编码数据的比特流中提取编码数据，视频帧包括块和不同于块的二维图像，块是通过将具有三维形状的对象表示为点群的点云投影到二维平面上而获得的；以及二维解码单元，其对由提取单元从比特流中提取的编码数据进行解码以恢复二维图像。