[发明专利]一种拍摄期间实时预览全景画面的方法、装置及全景相机

权利要求书

1.一种拍摄期间实时预览全景画面的方法，其特征在于，所述方法包括：

全景相机将采集到的画面实时拼接成完整的全景画面；

全景相机将完整的全景画面实时编码为能被客户端解码并以VR渲染模型播放的传输格式，生成实时拼接好的全景预览视频流；

全景相机实时传输拼接好的全景预览视频流给客户端，以供客户端实时预览拍摄期间的全景画面。

2.如权利要求1所述的方法，其特征在于，所述全景相机将采集到的画面实时拼接成完整的全景画面具体包括：

获取用于拼接全景图像的多幅图像；

将多幅图像分别展开成经纬度图像；

分别提取多幅经纬度图像之间的拼接区域，得到多个拼接区域，将多个拼接区域投影到单位球上；

提取单位球面上待拼接区域对应的柱面区域，分别计算待拼接区域的左、右图像之间的光流场；

根据待拼接区域的左、右图像之间的光流场，分别对每个拼接区域的图像进行融合，直至所有拼接区域的图像融合后，得到无缝拼接后的全景图像。

3.如权利要求2所述的方法，其特征在于，所述将多幅图像分别展开成经纬度图像具体包括：

获取将拍摄图像展开到经纬度图像的模型；

根据所述模型，分别展开所述多幅图像，得到与所述多幅图像分别对应的多幅经纬度图像。

4.如权利要求2所述的方法，其特征在于，

所述分别提取多幅经纬度图像之间的拼接区域，得到多个拼接区域，将多个拼接区域投影到单位球上具体包括：

分别提取N幅经纬度图像I₁-I_n之间的拼接区域，得到N个拼接区域S₁-S_n；对提取的N个拼接区域S₁-S_n进行球面投影，得到单位球面上的N个待拼接区域J₁-J_n，其中N为大于或等于2的自然数；

所述提取单位球面上待拼接区域对应的柱面区域，分别计算待拼接区域的左、右图像之间的光流场具体包括：

提取单位球面上N个待拼接区域J₁-J_n，将待拼接区域J₁-J_n分别映射到对应的柱面区域T₁-T_n；

分别计算N个柱面区域T₁-T_n的左、右图像之间的光流场，针对每个柱面区域，具体为：

计算左图像到右图像的光流场f_L→R(x,y)和右图像到左图像的光流场f_R→L(x,y)；

根据拼接区域像素点和左、右两个拼缝之间的距离自适应调整左图像到右图像的光流场f_L→R(x,y)的权重值α和右图像到左图像的光流场f_R→L(x,y)的权重值β，得到调整后的光流场。

5.如权利要求4所述的方法，其特征在于，权重值α∈[0,1],权重值β∈[0,1]，α值随着左图像的区域从左到右逐渐增大，β值随着右图像的区域从右到左逐渐减小。

6.如权利要求5所述的方法，其特征在于，所述根据待拼接区域的左、右图像之间的光流场，分别对每个拼接区域的图像进行融合具体包括：

根据拼接区域像素点和左、右两个拼缝之间的距离自适应调整左、右图像融合的权重值λ和μ；

根据以下公式对待拼接的区域T^L和T^R进行图像融合，获取融合后的区域T^B；

T^B(x,y)＝λgT^L(x+f_x(L→R)(x,y),y+f_y(L→R)(x,y))

+μgT^R(x+f_x(R→L)(x,y),y+f_y(R→L)(x,y))

其中，T^B(x,y)表示融合后像素点(x,y)的值，T^L(x,y)表示表示融合区域左图像中像素点的值，T^R(x,y)表示融合区域右图像中像素点的值，λ和μ为权重值，λ∈[0,1]，μ∈[0,1]。