[发明专利]全景视频的视场控制方法、装置、电子设备及存储介质在审
| 申请号: | 201811367835.5 | 申请日: | 2018-11-16 |
| 公开(公告)号: | CN111200748A | 公开(公告)日: | 2020-05-26 |
| 发明(设计)人: | 付宇豪 | 申请(专利权)人: | 北京字节跳动网络技术有限公司 |
| 主分类号: | H04N21/431 | 分类号: | H04N21/431;H04N21/44;H04N21/485;G06T19/20;G06T15/04;H04N13/363 |
| 代理公司: | 北京新知远方知识产权代理事务所(普通合伙) 11397 | 代理人: | 马军芳;张艳 |
| 地址: | 100041 北京市石景山区*** | 国省代码: | 北京;11 |
| 权利要求书: | 查看更多 | 说明书: | 查看更多 |
| 摘要: | |||
| 搜索关键词: | 全景 视频 视场 控制 方法 装置 电子设备 存储 介质 | ||
1.一种全景视频的视场控制方法,其特征在于,所述方法包括:
将全景视频中的视频帧映射为三维模型的表面纹理;
确定所述视频帧的符合播放策略的视场方向;
当所述符合播放策略的视场方向不同于当前播放窗口的视场方向时,转换播放窗口的视场方向与所述符合播放策略的视场方向一致;
将所述播放窗口的视场在所述三维模型的表面纹理中进行投影,得到处于所述播放窗口的视场的纹理区域;
在所述播放窗口中渲染得到的所述纹理区域。
2.根据权利要求1所述的方法,其特征在于,所述确定所述视频帧的符合播放策略的视场方向,包括:
从全景视频文件中提取所述视频帧对应的解码元数据;
解码所述视频帧对应的解码元数据,得到所述视频帧对应的播放参数;
基于所得到的所述播放参数,确定所述视频帧的符合播放策略的视场方向。
3.根据权利要求2所述的方法,其特征在于,所述播放参数包括缩放参数,所述方法还包括:
基于所述缩放参数,确定用于实现所述视场的虚拟镜头的放大倍数;
基于所确定的所述放大倍数,控制所述视频帧对应播放窗口的视场的缩放比例。
4.根据权利要求1所述的方法,其特征在于,所述确定所述视频帧的符合播放策略的视场方向,包括:
对所述视频帧进行目标对象检测,得到检测结果;
当所述检测结果表征所述视频帧中包含所述目标对象时,确定所述视频帧的对应所述目标对象的视场方向,为所述符合播放策略的视场方向。
5.根据权利要求4所述的方法,其特征在于,所述方法还包括:
确定所述视频帧对应播放窗口的视场的缩放比例,使得所述播放窗口中呈现的所述目标对象的大小与所述播放窗口相适配。
6.根据权利要求1所述的方法,其特征在于,所述将全景视频中的视频帧映射为三维模型的表面纹理,包括:
将所述视频帧的像素点映射到纹理空间,得到所述像素点的纹理坐标;
将所述像素点的纹理坐标映射到所述三维模型表面的顶点坐标,以形成所述三维模型的表面纹理。
7.根据权利要求1所述的方法,其特征在于,所述方法还包括:
确定与所述播放窗口的子窗口对应的子窗口视场;所述子窗口视场的方向不同于所述符合播放策略的视场方向;
将所述子窗口视场在所述三维模型的表面纹理中进行投影,得到处于所述子窗口视场的纹理区域;
在所述子窗口中渲染得到的所述纹理区域。
8.根据权利要求7所述的方法,其特征在于,所述确定与所述播放窗口的子窗口对应的子窗口视场,包括:
根据所确定的所述符合播放策略的视场方向,与所述子窗口视场的方向之间的相对位置关系,确定所述子窗口视场的方向;或者,
根据所述全景视频中的目标对象,确定包括所述目标对象的视场的方向为所述子窗口视场的方向。
9.一种全景视频中视场方向的控制装置,其特征在于,所述装置包括:
映射单元,用于将全景视频中的视频帧映射为三维模型的表面纹理;
确定单元,用于确定所述视频帧的符合播放策略的视场方向;所述符合播放策略的视场方向不同于当前播放窗口的视场方向;
转换单元,用于转换播放窗口的视场方向与所述符合播放策略的视场方向一致;
投影单元,用于将所述播放窗口的视场在所述三维模型的表面纹理中进行投影,得到处于所述播放窗口的视场的纹理区域;
渲染单元,用于在所述播放窗口中渲染得到的所述纹理区域。
10.根据权利要求9所述的装置,其特征在于,
所述确定单元,还用于从全景视频文件中提取所述视频帧对应的解码元数据;
解码所述视频帧对应的解码元数据,得到所述视频帧对应的播放参数;
基于所得到的所述播放参数,确定所述视频帧的符合播放策略的视场方向。
该专利技术资料仅供研究查看技术是否侵权等信息,商用须获得专利权人授权。该专利全部权利属于北京字节跳动网络技术有限公司,未经北京字节跳动网络技术有限公司许可,擅自商用是侵权行为。如果您想购买此专利、获得商业授权和技术合作,请联系【客服】
本文链接:http://www.vipzhuanli.com/pat/books/201811367835.5/1.html,转载请声明来源钻瓜专利网。
- 上一篇:一种图像数据传输方法、装置及系统
- 下一篇:太阳能光电模块的仿真效能检测方法





