[发明专利]用于天基信息的数据引接调度方法

说明书

本发明涉及用于天基信息的数据引接调度方法，包括：S100，对过往天基数据的到达时间进行分类统计；S200，根据分类统计的结果，分析不同工作模式下的引接数据的频率、大小、尺寸、类型和所述达到时间；S300，根据引接数据的分析结果，构建不同模式下的数据引接学习数据库；S400，将数据引接学习数据库中的数据通过机器学习算法进行训练，构建卫星过境与数据到达之间的关系模型；S500，根据关系模型预测卫星过境与数据到达之间引起的数据洪峰时间；S600，根据预测结果动态调整资源。本发明面向天基混合数据资源的全量引接，针对天基引接数据各异性的特点，构建基于统计的数据分析模型，通过主动预测数据洪峰和低谷，动态调整资源，提高在多种模式情况下的数据稳定性。

技术领域

本发明涉及数据处理技术领域，具体涉及一种用于天基信息的数据引接调度方法。

背景技术

随着空间信息科学的迅速发展，各种空间数据获取的手段和方式日趋快速和多样化，表现较为突出的是天基侦察数据。目前许多国家和政府已将海量天基侦察数据应用于国防、国土、环境、资源等领域，为大众提供各种地图导航服务，而且遥感影像数据逐渐成为空间信息科学重要的数据来源之一。

目前，国外有大量卫星数据产品对外公开，可以通过网站下载指定时间段和区域的卫星数据产品。对此，国内除气象卫星产品外，卫星数据产品都不对外公开，民商星数据可通过代理商进行购买或编程。同时，国内天基侦察数据分散在不同管理单位，长期处于分头管理、分散存储状态，尚缺少一种数据采集引接方法，作为各装备相关单位间的数据渠道，提高卫星数据利用率，为各类卫星数据资源的高效管理和分析应用提供支撑。

天基侦察数据根据不同的原则，有不同的分类，如根据卫星军民属性包括民商星，根据卫星用户不同有不同的数据供应单位。如果某一业务运行同时需要不同来源卫星数据，就需要同时引入不同用户不同源的数据。

传统的数据引接技术大都是针对结构化数据的引接，首先采集数据信息，然后传输至数据保存单元，经过规范化处理后进行入库归档，形成数据资源池。而试验数据不仅包括结构化数据，还包括非结构化数据、半结构化数据，这些非结构化数据、半结构化数据主要包括实验过程中产生的图像、数字、文字、视频、音频等类型数据，另外还包括接口数据、报文数据等特殊类型数据，其规模和复杂度都超越现有常规技术能够处理分析的范围。

传统的卫星数据产品引接一般是基于有线网或专网通过消息驱动或数据驱动的方式来完成。

消息驱动，一般链路是消息生产者向消息消费者发送消息。该模式下通常会用到中间件，比较常见的中间件有RocketMQ，Kafka，RabbitMQ等。这些中间件的目的是缓存生产者投递的消息直接到消费者准备接收这些消息，以此将两端系统解耦。在消息驱动架构中，消息的格式是基于消费者的需求制定的。消息传递可以是一对一，多对多，一对多或多对一。

数据驱动，即事件驱动，是对消息驱动方法的改进，对消息大小、消息格式做了较为严格的限制，这层基于消息的限制封装即为事件。在事件驱动模式中，生产者发布事件来表示系统变更，任何感兴趣且有权限接入的服务都可以订阅这些事件，并将这些事件作为触发器来启动预定逻辑、存储或者任务。事件驱动模式可以是一对一，多对一，一对多或多对多。通常情况下一般是多个目标根据过滤条件执行不同的事件。

现有针对天基数据的引接都是基于消息驱动或数据驱动，消息驱动即消息到达开始进行数据引接，数据驱动即数据到达开始进行数据引接。换言之，当前针对天基数据的引接都是基于到达信号的数据引接方式，均为通过对于外部激励的反馈实现对于天基数据的无差别引接，不具有对于天基信息引接数据量的主动预测性。