[发明专利]发送装置、发送方法、接收装置和接收方法

说明书

本发明能够在VR内容分发期间在VR兼容终端和VR不兼容终端之间获取公共图像。根据本发明，通过切取一部分或全部捕捉的球形图像并执行平面打包来获取矩形投影图像。通过编码投影图像的图像数据来获取视频流。传输包含视频流的容器。投影图像的渲染元信息插入到视频流和/或容器的层中。由插入视频流层的切取位置信息指示的切取位置的中心与由渲染元信息指示的投影图像的参考点重合。

技术领域

本技术涉及一种发送装置、一种发送方法、一种接收装置和一种接收方法。更详细地，本技术涉及一种发送装置等，其发送通过从球形捕捉图像中平面打包切取图像而获得的投影图像。

背景技术

最近，已经考虑虚拟现实(VR)内容的分发。例如，专利文献1描述了通过使用背靠背技术执行成像来获得具有180o或更大视角的超宽视角的前面图像和后面图像，并且从这两个图像创建等距柱面图像并将其传输到通信终端。在此处，具有180o或更大视角的超宽视角的前图像和后图像构成球形捕捉图像(360o VR图像)，并且等距圆柱方法是一种面内打包方法。

引用列表

专利文献

专利文献1：日本专利申请公开号2016-194784

发明内容

本发明要解决的问题

VR内容分发对VR兼容终端有效。然而，如果不考虑传统VR不兼容终端接收VR内容的情况，则在VR不兼容终端上显示失真的图像。需要确保在显示方面与传统终端向后兼容。

本技术的目的是当分发VR内容时，能够在VR兼容终端和VR不兼容终端之间获得公共图像。

问题的解决方案

当前技术的一个概念是

一种发送装置，包括：

处理单元，其切取一部分或全部球形捕捉图像，并对切取的球形捕捉图像执行面内打包，以获得具有矩形形状的投影图像；

编码单元，其对投影图像的图像数据进行编码，以获得视频流；

发送单元，其发送包括视频流的容器；以及

插入单元，其将用于渲染投影图像的元信息插入到容器和/或视频流的层中，其中，

由插入视频流层中的切取位置信息指示的切取位置的中心与由用于渲染的元信息指示的投影图像的参考点重合。

在本技术中，切取一部分或全部球形捕捉图像(360o VR图像)，并且通过处理单元对切取的球形捕捉图像进一步执行面内打包，从而获得具有矩形形状的投影图像。例如，球形捕捉图像由具有180o或更大视角的超宽视角的前图像和后图像构成。此外，平面内打包的格式类型的示例包括等矩形、交叉立方体等。

投影图像的图像数据由编码单元编码，从而获得视频流。包括该视频流的容器由发送单元发送。例如，所述容器采用国际标准化组织的基本媒体文件格式(ISOBMFF)流、运动图像专家组2-传输流(MPEG2-TS)、运动图像专家组媒体传输(MMT)流等。用于渲染投影图像的元信息由插入单元插入到容器和/或视频流的层中。通过将用于渲染的元信息插入到视频流的层中，无论容器类型如何，用于渲染的元信息都可以动态改变。

由插入视频流层中的切取位置信息指示的切取位置的中心被调整为与由用于渲染的元信息指示的投影图像的参考点重合。例如，投影图像可以由包括默认区域的多个区域组成，该默认区域的位置以参考点为中心，并且可以调整由切取位置信息指示的位置，以与默认区域的位置重合。