[发明专利]已编码点云数据的划分

说明书

视频码流解码系统和方法，一种方法，包括：接收视频码流，所述视频码流包括：具有多个二维(2D)图片的帧，所述多个2D图片是所述帧的层，所述多个2D图片中的每一个2D图片具有相同三维(3D)表示的相应属性，帧划分信息，指示所述帧是划分成多个子帧，所述多个子帧中的每一个子帧是所述多个2D图片中的每个2D图片的子区域的相应组合，以及3D边界框信息，指定所述多个子帧中的子帧对应的3D位置；使用所述帧划分信息识别所述子帧；以及对识别出的所述子帧进行解码。

相关申请的交叉引用

本申请要求于2019年3月15日提交的申请号为62/819,504的美国临时申请以及于2020年3月10日提交的申请号为16/814,350的美国申请优先权，这两个申请的公开内容通过引用整体并入本申请中。

技术领域

本申请涉及一组高级视频编解码技术，更具体地涉及基于视频的点云压缩。

背景技术

对这个世界的高级三维(3D)表示，使得更多沉浸式的互动和交流形式成为可能，并且也使机器可以理解、解读和导航我们这个世界。点云已经广泛用于这个世界的3D表示。目前已经确定出与点云数据相关联的多个用例，并且已经开发出点云表示和压缩的相应要求。

发明内容

本申请一些实施例提供在已编码点云码流中发信号通知划分(partitioning)信息的技术。本申请的基于视频的点云压缩(V-PCC)方案可以利用通用的视频编解码器进行点云压缩。本申请一些实施例提供了实现已编码点云码流的局部编码、传送、解码的技术。

在一些实施例中，提供了一种使用至少一个处理器对视频码流进行解码的方法。所述方法包括：接收视频码流，所述视频码流包括：具有多个二维(2D)图片的帧，所述多个2D图片是所述帧的层，所述多个2D图片中的每个2D图片具有相同三维(3D)表示的相应属性，帧划分信息，指示所述帧是划分成多个子帧，所述多个子帧中的每个子帧是所述多个2D图片中的每个2D图片的子区域的相应组合，以及3D边界框信息，指定所述多个子帧中的子帧对应的3D位置。所述方法还包括：使用所述帧划分信息识别所述子帧；以及对识别出的所述子帧进行解码。

在一实施例中，所述接收的视频码流的帧划分信息包括2D边界框信息，所述2D边界框信息指定所述帧中所述子帧的位置和所述子帧的边界其中至少一个。

在一实施例中，所述3D边界框信息指定在所述2D边界框信息中指定的2D边界框的3D位置，并且所述方法还包括：在对识别出的所述子帧进行解码之后，通过使用所述3D边界框信息，从所述视频码流中获取点云。

在一实施例中，所述多个2D图片包括第一图片、第二图片和第三图片，所述第一图片是纹理图像，所述第二图片是几何图像，所述第三图片是占用地图。

在一实施例中，所述方法还包括：在对识别出的所述子帧进行解码之后，通过使用所述3D边界框信息，从所述视频码流中获取点云。

在一实施例中，所述方法还包括：确定所述子帧是否是独立地编码，其中对所述子帧进行解码包括：在确定所述子帧是独立地编码的情况下，以独立于所述多个子帧中的其它子帧的方式，对所述子帧进行解码。

在一实施例中，所述接收的视频码流包括帧参数集，所述帧参数集包括所述帧划分信息和所述3D边界框信息。

在一实施例中，所述视频码流还包括具有多个2D图片的附加帧，所述多个2D图片为所述附加帧的层，所述附加帧的多个2D图片中的每个2D图片具有相同的附加3D表示的相应属性，并且所述方法还包括：使用用于标识所述帧的子帧的所述帧划分信息，识别所述附加帧的子帧，以及对识别出的附加帧的子帧进行解码。