[发明专利]一种基于Hadoop集群的海量空间数据质检方法和系统在审
申请号: | 202211056625.0 | 申请日: | 2022-08-31 |
公开(公告)号: | CN115495429A | 公开(公告)日: | 2022-12-20 |
发明(设计)人: | 胡剑锋;罗顶林 | 申请(专利权)人: | 上海飞未信息技术有限公司 |
主分类号: | G06F16/182 | 分类号: | G06F16/182;G06F16/13;G06F16/11;G06Q10/06 |
代理公司: | 暂无信息 | 代理人: | 暂无信息 |
地址: | 201108 上海市闵行*** | 国省代码: | 上海;31 |
权利要求书: | 查看更多 | 说明书: | 查看更多 |
摘要: | 本发明公开了一种基于Hadoop集群的海量空间数据质检方法和系统,分布式文件系统是一个高度容错性的系统,适合部署在廉价的机器上,能提供高吞吐量的数据访问,适合超大数据集的应用,根据分布式存储的特点,将SHP或GDB格式的矢量数据转化为易于分块的CSV文件格式;依赖于分布式文件系统,将传统的GIS数据文件分解到分布式文件系统中,并在此基础上,构建基于分布式的空间数据索引,对于所有录入到系统的空间数据都有数据元表进行描述。本发明主要解决海量空间数据质检工作效率低,耗时费力,影像数据入库效率的问题,使用该方法和系统可以将海量空间数据的图形和属性的多个质检规则在数分钟内完成质检,提高空间数据入库效率。 | ||
搜索关键词: | 一种 基于 hadoop 集群 海量 空间 数据 质检 方法 系统 | ||
【主权项】:
暂无信息
下载完整专利技术内容需要扣除积分,VIP会员可以免费下载。
该专利技术资料仅供研究查看技术是否侵权等信息,商用须获得专利权人授权。该专利全部权利属于上海飞未信息技术有限公司,未经上海飞未信息技术有限公司许可,擅自商用是侵权行为。如果您想购买此专利、获得商业授权和技术合作,请联系【客服】
本文链接:http://www.vipzhuanli.com/patent/202211056625.0/,转载请声明来源钻瓜专利网。