[发明专利]基于测控航迹信息的流媒体视频编目方法、检索方法及装置

说明书

本发明涉及一种基于测控航迹信息的流媒体视频编目方法、基于测控航迹信息和传感器载荷姿态信息的流媒体视频快速检索方法，相应的装置以及计算机存储介质。其中基于测控航迹信息和传感器载荷姿态信息的流媒体视频编目方法包括：提取无人机原始测控航迹数据；提取通过无人机航拍得到的原始流媒体视频数据；基于测控航迹信息和传感器载荷姿态信息对所述符流媒体视频进行编目。本发明将无人机的遥感测控的数据信息与流媒体视频相结合，能够将流媒体中的地点、场景的地理信息和传感器姿态信息同步反映给用户，也能使得用户直观地看到其所感兴趣地区的动态影像，满足无人机视频编目的自动化和人机交互需求。

技术领域

本发明涉及一种基于测控航迹信息的流媒体视频编目方法、基于测控航迹信息的流媒体视频快速检索方法，相应的装置以及计算机存储介质。

背景技术

目前，现有的地理信息管理系统管理的大都是一些基于卫星拍摄得到的静态图片数据，如果想要了解某地的地貌详情只能通过这些图片和互联网搜索引擎给出的文字描述，无法全面、直观和动态地了解该地的地貌详情。现有的百度地图、高德地图等地图引擎虽然也存储了一些基于地理信息的流媒体数据，如点击某个城市会弹出该区域最近的图片数据，但单纯的图片数据不能满足人们生活、研究的需要。目前，基于移动载体的视频拍摄应用越来越多，典型的如无人机航拍等。无人机航拍获取的流媒体视频虽然具有拍摄点多且跨度大、覆盖范围广、拍摄场景和移动路径变化快等特点，然而，通常无人机航拍获取的流媒体视频和无人机的姿态、航迹信息是相互独立的，二者之间缺乏关联，这导致需要依靠人眼对流媒体视频中的地点和场景进行识别。这往往不够精确，也为后续的数据分析、检索带来了不便。

发明内容

本发明提供了一种基于地理信息的流媒体视频编目方法，将无人机的遥感测控的数据信息与流媒体视频相结合，能够将流媒体中的地点和场景的地理信息同步反映给用户，也能使得用户直观地看到其所感兴趣地区的动态影像，满足无人机视频编目的自动化和人机交互需求。

本发明提供的基于地理信息的流媒体视频编目方法，包括以下步骤：

提取无人机原始测控航迹数据和传感器载荷姿态信息，对所述无人机原始测控航迹数据和传感器载荷姿态信息的频率进行判断，若频率过高，则进行降频处理，得到无人机测控航迹数据；

提取通过无人机航拍得到的原始流媒体视频数据，对所述原始流媒体视频数据进行判断，若所述原始流媒体视频数据不满足完整性和/或连续性要求，则进行拼接处理和/或补帧处理，得到流媒体视频数据；

基于所述无人机测控航迹数据对所述流媒体视频进行编目，其中基于所述无人机测控航迹数据对所述流媒体视频进行编目具体包括：

对所述无人机测控航迹数据进行编目，生成测控航迹信息；

对所述流媒体视频数据进行编目，生成流媒体视频；

将所述测控航迹信息与所述流媒体视频关联后进行编目，生成测控航迹信息与流媒体视频关系数据，从而实现基于测控航迹信息的流媒体视频编目。

优选地，补帧处理的步骤具体包括：

对所述原始流媒体视频数据按照时间分块，得到若干个视频数据块；

对所述视频数据块中的每一个的数据量大小进行判断，若该块的数据量小于阈值，则初步确定该视频数据块存在丢帧情况；

利用二分法在该视频数据块中进行查找，确定具体丢帧位置；

在该丢帧位置进行补帧操作。

优选地，将所述测控航迹信息与所述流媒体视频关联后进行编目，形成测控航迹信息与流媒体视频关系数据的步骤具体包括：