[发明专利]海洋卫星数据定标检验方法、装置、电子设备及存储介质

说明书

本申请涉及一种海洋卫星数据定标检验方法、装置、电子设备及存储介质。该方法包括：获取满足预设定标检验业务流程数据需求规则的目标源文件和目标参考文件；基于所述目标源文件数据生成K个任务单，每个任务单中携带有指向所述目标源文件下的单轨卫星数据的第一文件路径和指向所述目标参考文件下的参考数据的第二文件路径；根据预设的N个计算节点各自的资源占用率将所述K个任务单分发至M个计算节点，以使所述M个计算节点中的每个计算节点各自执行对应的任务单，其中，M大于等于2，且不大于N。本申请实施例中，通过充分、高效(负载均衡)利用定标检验系统中的N台高性能的计算节点进行并行计算来加快定标检验的处理流程，提高运算效率。

技术领域

本申请属于卫星技术领域，具体涉及一种海洋卫星数据定标检验方法、装置、电子设备及存储介质。

背景技术

定标检验工作是卫星投入正常使用的必要步骤，用于定标检验业务的源数据主要包括：海洋卫星数据、海洋卫星试验观测数据、卫星定标检验场网观测数据、国外卫星数据、国外相关网站上发布的模式数据(例如，来自美国国家环境预报中心(National Centersfor Environmental Prediction，NCEP)的模式数据、来自欧洲数值中心中时天气预报(European Centre for Medium-Range Weather Forecast，ECMWF)的模式数据、来自全球海洋观测网(Array for Real-time Geostrophic Oceanography，ARGO)的模式数据、来自国家浮标数据中心(National Data Buoy Center，NDBC)的热带大气海洋(TropicalAtmosphere Ocean，TAO)数据等)等，定标检验业务所需的输入数据来源各异、种类较多、数据量大。由于定标检验流程需要处理的数据量大(以天为单位进行处理)，处理起来会比较耗时。

发明内容

鉴于此，本申请的目的在于提供一种海洋卫星数据定标检验方法、装置、电子设备及存储介质，以改善现有定标检验业务处理流程耗时过久的问题。

本申请的实施例是这样实现的：

第一方面，本申请实施例提供了一种海洋卫星数据定标检验方法，应用于调度服务器，所述方法包括：获取满足预设定标检验业务流程数据需求规则的目标源文件和目标参考文件；基于所述目标源文件的数量生成K个任务单，其中，K为大于等于2的正整数，每个任务单中携带有指向所述目标源文件下的单轨卫星数据的第一文件路径和指向所述目标参考文件下的参考数据的第二文件路径；根据预设的N个计算节点各自的资源占用率将所述K个任务单分发至M个计算节点，以使所述M个计算节点中的每个计算节点各自执行对应的任务单，以根据该任务单中的第一文件路径对应的源数据和第二文件路径对应的所述参考数据进行定标检验业务处理，得到定标检验结果，其中，M和N均为正整数，且M大于等于2，且不大于N。

本申请实施例中，在定标检验任务启动后，基于获取到的取满足预设定标检验业务流程数据需求规则的目标源文件生成K个任务，并根据N个计算节点各自的资源占用率将K个任务单分发至M个计算节点并行进行定标检验，通过充分、高效(负载均衡)利用N台高性能的计算节点进行并行计算来加快定标检验的处理流程，提高运算效率。

结合第一方面实施例提供的一种可能的实施方式，获取满足预设定标检验业务流程数据需求规则的目标源文件和目标参考文件，包括：从系统数据库中选取出指定日期的源文件和参考文件；从选取出的所述源文件和所述参考文件中选取出具有相同观测要素的待选源文件和待选参考文件；基于所述待选源文件和所述待选参考文件，得到所述目标源文件和所述目标参考文件。本申请实施例中，在定标检验任务启动时，通过选取与指定日期相同且具有相同观测要素的源文件和对应的参考文件来作为目标源文件和目标参考文件，保证了定标检验的可行性和结果的准确性。