[发明专利]基于集群和并行技术的海量卫星数据处理系统及处理方法无效
申请号: | 201210015602.5 | 申请日: | 2012-01-18 |
公开(公告)号: | CN102622272A | 公开(公告)日: | 2012-08-01 |
发明(设计)人: | 殷崎栋;傅南翔;罗海驰 | 申请(专利权)人: | 北京华迪宏图信息技术有限公司 |
主分类号: | G06F9/50 | 分类号: | G06F9/50;G06F17/30;H04L29/08 |
代理公司: | 北京众合诚成知识产权代理有限公司 11246 | 代理人: | 朱琨 |
地址: | 100195 北京市海淀区海淀*** | 国省代码: | 北京;11 |
权利要求书: | 查看更多 | 说明书: | 查看更多 |
摘要: | 本发明公开了计算机数据处理技术领域中的一种基于集群和并行技术的海量卫星数据处理系统及处理方法。处理系统包括顺序连接的存储模块、网络传输模块和处理模块;处理模块包括全球分块单元、投影查找表读写单元、任务分配单元、调度方式配置单元和计算节点单元;处理方法是:先根据地球的经纬度按10度进行分块,得到十度分块;再确定每个十度分块对应的投影查找表中的有效数据和五分钟段数据中的有效数据;任务分配单元根据任务分配方式将1个十度分块发送到任意1个空闲的计算节点单元;空闲的计算节点单元处理十度分块中的数据。本发明利用集群系统对海量的数据进行并行处理,提高了卫星数据的处理能力。 | ||
搜索关键词: | 基于 集群 并行 技术 海量 卫星 数据处理系统 处理 方法 | ||
【主权项】:
一种基于集群和并行技术的海量卫星数据处理系统,其特征是所述处理系统包括顺序连接的存储模块、网络传输模块和处理模块;所述处理模块包括全球分块单元、投影查找表读写单元、任务分配单元、调度方式配置单元和计算节点单元;其中,全球分块单元通过网络传输模块与存储模块相连;投影查找表读写单元通过网络传输模块与存储模块相连;任务分配单元通过网络传输模块与存储模块相连,并与计算节点单元相连;调度方式配置单元与任务分配单元相连;计算节点单元通过网络传输模块与存储模块相连,并与任务分配单元相连;全球分块单元用于根据地球的经纬度按10度进行分块,得到十度分块并存储到存储模块中;投影查找表读写单元用于确定每个十度分块对应的投影查找表中的有效数据和五分钟段数据中的有效数据,并将每个十度分块对应的投影查找表中的有效数据和五分钟段数据中的有效数据存储到存储模块;调度方式配置单元用于设置任务分配方式;任务分配单元用于确定空闲的计算节点单元,并从存储模块中读取十度分块发送到空闲的计算节点单元;计算节点单元用于从存储模块中提取与十度分块对应的投影查找表中的有效数据和五分钟段数据中的有效数据,并对十度分块中的数据进行处理。
下载完整专利技术内容需要扣除积分,VIP会员可以免费下载。
该专利技术资料仅供研究查看技术是否侵权等信息,商用须获得专利权人授权。该专利全部权利属于北京华迪宏图信息技术有限公司,未经北京华迪宏图信息技术有限公司许可,擅自商用是侵权行为。如果您想购买此专利、获得商业授权和技术合作,请联系【客服】
本文链接:http://www.vipzhuanli.com/patent/201210015602.5/,转载请声明来源钻瓜专利网。
- 上一篇:一种铁基球团粘合剂及其制备方法
- 下一篇:一种用于烟草中的增香剂及其使用方法