[发明专利]用于将VR 360视频下发给远程终端用户的可缩放FOV+有效
申请号: | 201880082956.7 | 申请日: | 2018-07-05 |
公开(公告)号: | CN111567052B | 公开(公告)日: | 2022-01-14 |
发明(设计)人: | 伊斯科·迪佛尔;阿米拉姆·阿洛奇;李峰;鲍里斯·苏霍利特科;盖伊·阿尔莫格;庄冠华 | 申请(专利权)人: | 华为技术有限公司 |
主分类号: | H04N21/2343 | 分类号: | H04N21/2343;H04N21/24;H04N21/6587;H04N21/81 |
代理公司: | 北京同立钧成知识产权代理有限公司 11205 | 代理人: | 王蕊;臧建明 |
地址: | 518129 广东*** | 国省代码: | 广东;44 |
权利要求书: | 查看更多 | 说明书: | 查看更多 |
摘要: | |||
搜索关键词: | 用于 vr 360 视频 发给 远程 终端 用户 缩放 fov | ||
1.一种用于生成虚拟现实VR数据的多个扩展视口流,以下发给多个客户端设备的编码装置,包括:
处理单元,用于:
将投影为等距柱状投影ERP格式的VR视频文件中定义的球体分割成多个重叠段;
在多次迭代中的每次迭代中,通过执行以下操作为所述VR视频文件创建多个扩展视口流:
旋转所述球体的所述多个重叠段中的每个重叠段;
从所述球体的多个旋转重叠段中的每个旋转重叠段裁剪各自的扩展视场EFOV帧;
指示网络将所述多个旋转重叠段中的每个旋转重叠段各自的所述EFOV帧传输给一个或多个分发设备;
所述处理单元还用于:根据所述EFOV帧的面积,将所述球体分割成所述多个重叠段,其中,所述EFOV帧的面积是根据所述装置与一个或多个所述分发设备之间通信的估计时延值计算;所述处理单元根据包括来自一个或多个所述分发设备的往返时延RTT数据的体验质量QoE消息中包含的时间戳计算所述估计时延值。
2.根据权利要求1所述的编码装置,其特征在于,所述处理单元根据所述EFOV帧的面积,将所述球体分割成所述多个重叠段,其中,所述EFOV帧的面积是根据用于呈现所述多个扩展视口流中的一个扩展视口流的显示器的最大角速度计算。
3.根据权利要求1或2所述的编码装置,其特征在于,所述处理单元用于按照多种投影格式中的一种对所述EFOV帧进行编码,其中,所述多种投影格式包括由以下一个或多个:ERP、直线投影、立方体图投影CMP、等面积投影EAP、八面体投影OHP以及柏拉图固体投影PSP。
4.根据权利要求1或2所述的编码装置,其特征在于,所述处理单元在将每个所述EFOV帧添加到所述多个扩展视口流中的各自的扩展视口流之前,将每个所述EFOV帧从等距柱状投影格式转换为直线格式。
5.根据权利要求1或2所述的编码装置,其特征在于,所述处理单元还用于通过从所述VR视频文件的图像组GOP的连续帧开始重复多个迭代中的每个迭代,为所述多个扩展视口流中的每个扩展视口流创建多个瞬时解码刷新IDR移位视口流,其中,为所述多个扩展视口流中的每个扩展视口流创建的所述多个瞬时解码刷新IDR移位视口流的数量等于所述GOP中的帧的数量,使得所述多个扩展视口流中的每个扩展视口流的所述多个瞬时解码刷新IDR移位视口流中的每个IDR移位视口流包括所述GOP中的不同帧位置的IDR帧。
6.根据权利要求1或2所述的编码装置,其特征在于,所述处理单元还用于将所述多个扩展视口流中的至少一个扩展视口流本地存储到所述编码装置中,直到由一个或多个所述分发设备请求为止。
7.一种用于生成虚拟现实VR数据的多个视口流,以下发给多个客户端设备的方法,其特征在于,包括:
操作编码装置中的处理单元以执行以下操作:
将投影为等距柱状投影ERP格式的VR视频文件中定义的球体分割成多个重叠段;
在多次迭代中的每次迭代中,通过执行以下操作为所述VR视频文件创建多个扩展视口流:
旋转所述球体的所述多个重叠段中的每个重叠段;
从所述球体的多个旋转重叠段中的每个旋转重叠段裁剪各自的扩展视场EFOV帧;
指示网络将所述多个旋转重叠段中的每个旋转重叠段各自的所述EFOV帧传输给一个或多个分发设备;
还操作编码装置中的处理单元以执行以下操作:根据所述EFOV帧的面积,将所述球体分割成所述多个重叠段,其中,所述EFOV帧的面积是根据所述装置与一个或多个所述分发设备之间通信的估计时延值计算;所述处理单元根据包括来自一个或多个所述分发设备的往返时延RTT数据的体验质量QoE消息中包含的时间戳计算所述估计时延值。
该专利技术资料仅供研究查看技术是否侵权等信息,商用须获得专利权人授权。该专利全部权利属于华为技术有限公司,未经华为技术有限公司许可,擅自商用是侵权行为。如果您想购买此专利、获得商业授权和技术合作,请联系【客服】
本文链接:http://www.vipzhuanli.com/pat/books/201880082956.7/1.html,转载请声明来源钻瓜专利网。