[发明专利]一种面向软件定义卫星的大数据系统及数据自动处理方法有效
申请号: | 202110949441.6 | 申请日: | 2021-08-18 |
公开(公告)号: | CN113656608B | 公开(公告)日: | 2023-10-24 |
发明(设计)人: | 赵军锁;朱博;钟方洁;赵岩 | 申请(专利权)人: | 中国科学院软件研究所 |
主分类号: | G06F16/41 | 分类号: | G06F16/41;G06F16/43;G06F16/21;G06F16/22;G06F16/23;G06F16/24;G06F9/445 |
代理公司: | 北京超凡宏宇知识产权代理有限公司 11463 | 代理人: | 李飞 |
地址: | 100190 *** | 国省代码: | 北京;11 |
权利要求书: | 查看更多 | 说明书: | 查看更多 |
摘要: | |||
搜索关键词: | 一种 面向 软件 定义 卫星 数据 系统 自动 处理 方法 | ||
1.一种面向软件定义卫星的大数据系统,其特征在于,所述大数据系统包括:
数据预处理及数据库管理模块,被配置为:将待录入的非结构化数据转换为标准数据结构对应的待录入的目标数据,并实现对结构化数据、所述目标数据和与所述目标数据对应的元数据的管理操作;
结构化/非结构化数据库,被配置为存储所述结构化数据以及所述目标数据;
多个数据处理服务模块,其中,每个数据处理服务模块被配置为基于所述待录入的非结构化数据或者根据所述目标数据提供一种数据处理服务,其中,针对所述待录入数据的服务类型包括:数据录入服务、数据格式转换服务以及缩略图生成服务;
服务镜像库,被配置为存储所述多个数据处理服务模块对应的应用镜像,其中,所述应用镜像包括:各个数据处理服务运行所需的库、环境以及程序;
交互前端模块,被配置为接收前端用户输入的命令或者交互操作;
命令/交互操作解析模块,被配置为解析所述命令或所述交互操作并根据解析结果确定目标请求服务类型或者执行与数据库访问相关的服务请求指令;
系统运行控制模块,被配置为:根据所述结构化/非结构化数据库所存储的数据和设定流程,依次调用至少两个数据处理服务以实现与所述目标请求服务类型对应的目标请求服务;
其中,所述服务镜像库以及实现所述多个数据处理服务模块以插件的形式设置于所述大数据系统中。
2.如权利要求1所述的大数据系统,其特征在于,所述数据预处理及数据库管理模块包括:
多源数据标准化处理模块,被配置为:通过调用至少一个数据处理服务的方式,将所述待录入的非结构化数据转换为所述目标数据,其中,所述待录入的非结构化数据包括不同存储结构的多源数据或者异构数据,所述至少要一种数据处理服务包括:数据有效性检查、文件格式转换或者缩略图生成;
多源数据管理模块,被配置为实现对所述结构化数据、所述目标数据和与所述目标数据对应的元数据的管理操作,其中,所述管理操作的类型包括:录入、删除、更新或者检索。
3.如权利要求2所述的大数据系统,其特征在于,所述多源数据包括:光学数据、微波数据、激光数据、视频数据或者非成像类数据。
4.如权利要求1所述的大数据系统,其特征在于,所述系统运行控制模块被配置为根据所述设定流程对所述至少两个数据处理服务进行自动化流程控制,以组织所述至少两个数据处理服务对所述待录入的非结构化数据或者所述目标数据进行处理实现所述目标请求服务。
5.如权利要求2所述的大数据系统,其特征在于,所述多源数据标准化处理模块还被配置为:针对通过面阵成像载荷得到的图像进行绝对辐射校正、相对辐射校正或者几何校正;或者,针对通过线阵推扫式成像载荷得到的图像进行绝对辐射校正、相对辐射校正或者几何校正。
6.如权利要求2所述的大数据系统,其特征在于,针对所述目标数据对应的元数据的管理操作包括:自动从所述元数据中提取数据特征信息,其中,所述数据特征信息用于表征所述待录入数据所对应的目标对象或者所述目标对象的状态。
7.如权利要求2所述的大数据系统,其特征在于,所述多源数据管理模块还被配置为对运行所述至少两个数据处理服务得到的结果进行管理或者提供下载所述结果的功能。
8.如权利要求1所述的大数据系统,其特征在于,在所述结构化/非结构化数据库中将所述结构化数据包括的固有信息存储为基础表单,将对所述待录入的非结构化数据进行分析和挖掘获取的信息统一存储至属性表单并与数据ID相关联存储,其中,所述固有信息包括:卫星名称、载荷名称或者帧频。
9.如权利要求6所述的大数据系统,其特征在于,所述结构化/非结构化数据库还被配置为:存储所述数据特征信息、存储用户发起的任务信息以及任务结果存储位置信息。
该专利技术资料仅供研究查看技术是否侵权等信息,商用须获得专利权人授权。该专利全部权利属于中国科学院软件研究所,未经中国科学院软件研究所许可,擅自商用是侵权行为。如果您想购买此专利、获得商业授权和技术合作,请联系【客服】
本文链接:http://www.vipzhuanli.com/pat/books/202110949441.6/1.html,转载请声明来源钻瓜专利网。
- 上一篇:车载活体检测系统、活体检测方法和装置
- 下一篇:一种麦芽糊精制备工艺及设备