[发明专利]视频编码的方法、装置、电子设备及存储介质

权利要求书

1.一种视频编码的方法，其特征在于，所述方法包括：

获取至少一个视觉三维3D场景的体积数据；

将所述体积数据转换为点云数据；

将所述点云数据投影到二维2D图像上；

对投影到所述2D图像上的所述点云数据进行编码；以及

组成媒体文件，所述媒体文件封装了元数据和已编码的所述点云数据，所述元数据包括：选定的与3D分区对应的观察位置/角度列表、与选定的观察位置/角度对应的2D/3D分区的索引，所述元数据指示六自由度6DoF媒体，所述元数据进一步指示六自由度6DoF坐标系上的多个观察位置，以及所述多个观察位置处的多个角度，所述多个观察位置包括前/后、上/下和左/右的不同的观察位置，所述多个角度包括所述前/后、上/下和左/右的不同的观察位置处的角度。

2.根据权利要求1所述的视频编码的方法，其特征在于，所述对投影到所述2D图像上的所述点云数据进行编码，包括：将所述点云数据划分为至少两个分区。

3.根据权利要求2所述的视频编码的方法，其特征在于，所述对投影到所述2D图像上的所述点云数据进行编码，包括：彼此独立地对所述至少两个分区进行编码。

4.根据权利要求3所述的视频编码的方法，其特征在于，所述组成媒体文件包括：将已编码的每个分区添加到所述媒体文件。

5.根据权利要求2所述的视频编码的方法，其特征在于，所述元数据进一步指示所述至少两个分区的布局信息；或者

所述至少两个分区包括在六自由度6DoF坐标系上的至少两个3D分区，所述元数据进一步指示所述3D分区在所述六自由度6DoF坐标系上的3D位置。

6.根据权利要求5所述的视频编码的方法，其特征在于，所述方法进一步包括：

将所述媒体文件传输到云服务器和媒体播放器中的至少一个，以使所述云服务器和媒体播放器中的至少一个，根据所述至少两个分区的布局信息从所述媒体文件中提取至少一个特定的分区；或者

将所述媒体文件传输到云服务器和媒体播放器中的至少一个，以使所述云服务器和媒体播放器中的至少一个，根据所述3D位置从所述媒体文件中提取至少一个特定的3D分区。

7.根据权利要求1所述的视频编码的方法，其特征在于，所述元数据包括360度虚拟现实数据。

8.根据权利要求1所述的视频编码的方法，其特征在于，已编码的所述点云数据包括点云重建元数据。

9.一种视频编码的装置，其特征在于，所述装置包括：

选择模块，用于获取至少一个视觉三维3D场景的体积数据；

转换模块，用于将所述体积数据转换为点云数据；

投影模块，用于将所述点云数据投影到二维2D图像上；

编码模块，用于对投影到所述2D图像上的所述点云数据进行编码；以及

组成模块，用于组成媒体文件，所述媒体文件封装了元数据和编码的所述点云数据，所述元数据包括：选定的与3D分区对应的观察位置/角度列表、与选定的观察位置/角度对应的2D/3D分区的索引，所述元数据指示六自由度6DoF媒体，所述元数据进一步指示六自由度6DoF坐标系上的多个观察位置，以及所述多个观察位置处的多个角度，所述多个观察位置包括前/后、上/下和左/右的不同的观察位置，所述多个角度包括所述前/后、上/下和左/右的不同的观察位置处的角度。

10.一种非易失性计算机可读存储介质，其特征在于，包括：所述存储介质存储有多条指令，可以使至少一个处理器执行如权利要求1～8任一项所述的方法。

11.一种电子设备，其特征在于，包括存储器、处理器及存储在存储器上并可在处理器上运行的计算机程序，所述处理器执行所述程序时实现权利要求1～8任一项所述的方法。