[发明专利]立体虚拟现实直播方法、装置及电子设备有效
申请号: | 201610808586.3 | 申请日: | 2016-09-07 |
公开(公告)号: | CN106385576B | 公开(公告)日: | 2017-12-08 |
发明(设计)人: | 简培云 | 申请(专利权)人: | 深圳超多维科技有限公司 |
主分类号: | H04N13/00 | 分类号: | H04N13/00;H04N13/02;H04N13/04;H04N21/2187 |
代理公司: | 深圳市六加知识产权代理有限公司44372 | 代理人: | 王广涛 |
地址: | 518000 广东省深圳市*** | 国省代码: | 广东;44 |
权利要求书: | 查看更多 | 说明书: | 查看更多 |
摘要: | |||
搜索关键词: | 立体 虚拟现实 直播 方法 装置 电子设备 | ||
技术领域
本发明涉及直播技术领域,尤其涉及立体虚拟现实直播方法、装置及电子设备。
背景技术
虚拟现实(Virtual Reality),简称VR技术,其利用电脑或其它智能计算设备模拟产生一个三维空间的虚拟世界,提供用户关于视觉、听觉、触觉等感官的模拟,让用户如同身临其境一般。VR显示能够提供非常沉浸感的体验,非常适合游戏、影视、交互等领域。随着科技的进步,VR显示在原理和实现手段上也逐步完善,现已逐渐从实验室科研项目走向消费市场。
直播是一种在现场随着事件的发生、发展进程同步制作和发布信息,具有双向流通过程的信息发布方式。随时互联网络技术的发展,直播的概念有了新的拓展和发展,网络直播受到了越来越多人的关注。
在实现本发明过程中,发明人发现相关技术存在以下问题:现有的直播方式较单调乏味,用户体验不佳。
发明内容
本发明提供一种立体虚拟现实直播方法、装置及电子设备,提供一种新颖的、将立体和VR相结合的直播方式,能够解决现有直播方式较单调乏味,用户体验不佳的问题。
本发明实施例提供一种立体虚拟现实直播方法,包括:
获取至少两个不同视角的主播图像信息,所述至少两个不同视角的主播图像信息包括左右双目摄像头实时采集的不同视角的主播图像信息;
根据所述至少两个不同视角的主播图像信息和预先建立的虚拟场景模型,获取合成有所述主播和所述虚拟场景的立体全景视图,所述立体全景视图包括左眼全景视图及右眼全景视图;
发送所述立体全景视图,以使接收端根据所述立体全景视图进行立体化的虚拟现实显示,从而实现立体虚拟现实直播。
可选地,
所述根据所述至少两个不同视角的主播图像信息和预先建立的虚拟场景模型,获取合成有所述主播和所述虚拟场景的立体全景视图包括:
对所述左右双目摄像头实时采集的主播图像信息进行抠图处理,获取所述主播图像中主播的左视图及右视图;
根据所述主播的左视图及右视图与预先建立的虚拟场景模型,进行所述主播和所述虚拟场景的合成处理,获取立体全景视图。
可选地,所述双摄像头的不同视角包括:平行视角或交叉视角。
可选地,所述根据所述主播的左视图及右视图与预先建立的虚拟场景模型,进行所述主播和所述虚拟场景的合成处理,获取立体全景视图,具体包括:
将所述主播的左视图和右视图重叠放置于所述虚拟场景模型中的预定位置;
利用左虚拟相机按照不同拍摄姿态对所述放置有所述左视图的虚拟场景模型进行多次渲染,获取多张左渲染视图,对所述多张左渲染视图进行全景拼接处理,生成左眼全景视图;以及
利用右虚拟相机按照不同拍摄姿态对所述放置有所述右视图的虚拟场景模型进行多次渲染,获取多张右渲染视图,对所述多张右渲染视图进行全景拼接处理,生成右眼全景视图。
可选地,在所述将所述主播的左视图和右视图重叠放置于所述虚拟场景模型中的预定位置之前,对所述左视图和右视图进行尺寸缩放处理和/或视差调整处理。
可选地,所述全景包括:球面全景、圆柱全景或立方盒全景。
可选地,在所述渲染的过程中进行预定特效处理。
可选地,所述发送所述立体全景视图包括:
对所述立体全景视图进行压缩处理,发送所述压缩处理后的立体全景视图。
又一方面,本发明实施例还提供了一种立体虚拟现实直播方法,包括:
接收立体全景视图,所述立体全景视图根据至少两个不同视角的主播图像信息和预先建立的虚拟场景模型合成,所述立体全景视图包括左眼全景视图及右眼全景视图,所述至少两个不同视角的主播图像信息包括左右双目摄像头实时采集的不同视角的主播图像信息;
获取虚拟现实设备佩戴者的头部姿态,根据所述佩戴者的头部姿态确定虚拟相机的拍摄姿态;
利用左虚拟相机按照确定的拍摄姿态渲染所述左眼全景视图得到左渲染视图,利用右虚拟相机按照确定的拍摄姿态渲染所述右眼全景视图得到右渲染视图;
对所述左渲染视图及右渲染视图分别进行反畸变处理,并呈现经反畸变处理后的所述左渲染视图及右渲染视图,从而实现立体虚拟现实直播。
可选地,所述获取虚拟现实设备佩戴者的头部姿态,具体包括:
根据陀螺仪采集的信息和加速计采集的信息确定所述虚拟现实设备佩戴者的头部姿态。
可选地,
所述接收的立体全景视图进行了压缩处理;
该专利技术资料仅供研究查看技术是否侵权等信息,商用须获得专利权人授权。该专利全部权利属于深圳超多维科技有限公司,未经深圳超多维科技有限公司许可,擅自商用是侵权行为。如果您想购买此专利、获得商业授权和技术合作,请联系【客服】
本文链接:http://www.vipzhuanli.com/pat/books/201610808586.3/2.html,转载请声明来源钻瓜专利网。