[发明专利]环视全景图像生成方法、装置、电子设备及存储介质

说明书

本发明涉及一种环视全景图像生成方法、装置、电子设备及存储介质，其中方法包括：获取多个拍摄装置采集到的多方向上的第一图像和目标物周围全景俯视图像，多个拍摄装置置于目标物上；根据多方向上的第一图像和目标物周围全景俯视图像，设计神经网络模型，多方向上的第一图像作为神经网络的输入，目标物周围全景俯视图像作为神经网络的输出；获取多个拍摄装置采集到的多方向上的第二图像，运用神经网络模型，输出环视全景图像。摄像机安装角度可以多样，避免了传统方式固定摄像头固定视角的缺陷，能够更好地还原目标物周围环境，增加俯视界面的可视视野，提高安全性，减少安全隐患，可普遍适用于车辆、船舶、飞行器等物体。

技术领域

本发明涉及图像处理技术领域，更具体地说，涉及一种环视全景图像生成方法、装置、电子设备及存储介质。

背景技术

随着我国经济的飞速发展，交通运输车辆不断增多，由此产生的交通问题越来越成为人们关注的问题。统计研究表明，90％以上的交通事故源于驾驶员错误判断和决策，作为人-车-路交通系统的重要组成部分，人类受身体状态、驾驶盲区、反应时间、驾驶经验等局限，已经成为此系统的一个薄弱环节。驾驶员不能及时准确地获得相对全面的当前车辆环境信息，从而出现疏忽和判断失误等危险情况。全国道路交通事故原因的统计资料表明：机动车驾驶员纵向间距保持不够、疏忽大意、判断失误和操作不当占事故原因的比重有逐年增加的趋势。据统计，在道路交通事故形态中，追尾碰撞、偏离车道引起的碰撞、侧翻以及超速而引起的交通事故，占全部事故的比重达到40％，事故后果也往往比较严重。

因此，现有技术亟待有很大的进步。

发明内容

本发明要解决的技术问题在于驾驶员不能及时准确地获得相对全面的当前车辆环境信息，从而出现疏忽和判断失误等危险情况，针对现有技术的上述的缺陷，一方面，本发明提供一种环视全景图像生成方法，包括：

获取多个拍摄装置采集到的目标物多方向上的第一图像和目标物周围环视全景俯视图像，所述多个拍摄装置置于所述目标物上；

根据所述第一图像和所述环视全景俯视图像，设计神经网络模型，所述第一图像作为所述神经网络的输入，所述环视全景俯视图像作为所述神经网络的输出；

获取所述多个拍摄装置采集到的目标物多方向上的第二图像，运用所述神经网络模型，输出目标物环视全景图像。

优选地，所述获取多个拍摄装置采集到的目标物多方向上的第一图像和目标物周围环视全景俯视图像，所述多个拍摄装置置于所述目标物上包括：

在所述目标物前后左右四个方向放置鱼眼相机，拍摄所述目标物周围图像；

使用标准镜头摄像头，在所述目标物中心上方拍摄俯瞰图像；

对所述第一图像和所述环视全景俯视图像进行预处理。

优选地，所述神经网络模型包括生成网络和辨别网络，所述生成网络用于将潜在空间中的随机点即随机向量作为输入，并将其解码为合成图像：所述辨别网络用于将图像作为输入，并预测图像是来自训练集真实图像还是由生成器网络创建。

优选地，所述对所述第一图像和所述环视全景俯视图像进行预处理包括：

对所述第一图像和所述环视全景俯视图像进行灰度化和二值化。

优选地，所述目标物为车辆、轮船、飞行器。

相应地，本发明还提供了一种环视全景图像生成装置，包括：

训练图像获取模块，用于获取多个拍摄装置采集到的目标物多方向上的第一图像和目标物周围环视全景俯视图像，所述多个拍摄装置置于目标物上；

神经网络模型建立模块，用于根据所述多方向上的图像和所述目标物周围全景俯视图像，设计神经网络模型，所述第一图像作为所述神经网络的输入，所述环视全景俯视图像作为所述神经网络的输出；