[发明专利]一种多源指标数据智能存储的管理方法及装置

说明书

本发明适用于数据存储技术领域，提供一种多源指标数据智能存储的管理方法及装置，所述方法包括：根据指标数据来源不同，将指标数据划分为多种类型，这里指标数据的类型有三种，分别为指标成果文件类型、第三方指标数据接口类型和复合指标类型；根据指标数据的类型，通过调度规则将不同类型的指标数据按照统一的对象进行指标数据入库。本发明方法可以将不同来源的指标以及指标数据以统一的形式按照一定的规则存储到不同的数据库中，并给空间规划业务提供统一的、高效的、便捷的接口服务；本发明能有效的解决单一体系指标存储管理存在的问题，并能很好的降低开发成本，缩短项目周期，提高生产效率。

技术领域

本发明属于数据存储技术领域，尤其涉及一种多源指标数据智能存储的管理方法及装置。

背景技术

国土空间规划编制、实施、监督评价和体检评估等全过程日程业务办理过程中，涉及到了对大量指标的存储管理，这些指标种类繁多，来源形式多种多样，同时数据量也非常的大，目前已经涉及到的指标有千余种，按照全省指标按天来汇聚入库，每年指标数据量将近亿级，通过现有指标数据存储方式，显然无法满足指标数据的存储与高效查询。

在自然资源应用领域，指标包含了指标项、指标数据、指标来源、指标元信息等，这些数据有着数据量大、种类繁多、数据来源不一等特点，以传统的单一体系进行指标数据管理扩展性差、灵活性低、效率低的问题，难以满足日新月异的指标数据实时的联动更新以及同一指标不同维度统计数据的准确性。

传统的指标管理模式技术具体存在以下问题：

1、现有单一体系下指标数据仅支持数据录入无法满足不同来源指标数据的入库问题，比如指标数据来自于第三方业务系统、空间数据实时计算、统计年鉴指标数据、复合指标计算以及空间规划成果包中的指标数据等，这些指标数据种类繁多、来源形式多种多样，在现有的单一指标管理模式下已无法满足系统的需求。

2、现有单一体系下指标数据存储单一且只能通过人工的方式进行建表存储，存储数据量过小，无法满足年数据量达到亿级的问题。

3、指标数据在现有的存储规则下，数据量达到亿级以上，查询效率很低的问题。

发明内容

鉴于上述问题，本发明的目的在于提供一种多源指标数据智能存储的管理方法及装置，旨在解决现有指标数据管理扩展性差、灵活性低、效率低的技术问题，以满足在自然资源与规划业务中提出的变化不定的指标以及指标数据的管理需求。

本发明采用如下技术方案：

一方面，所述多源指标数据智能存储的管理方法，包括下述步骤：

根据指标数据来源不同，将指标数据划分为多种类型，这里指标数据的类型有三种，分别为指标成果文件类型、第三方指标数据接口类型和复合指标类型；

根据指标数据的类型，通过调度规则将不同类型的指标数据按照统一的对象进行指标数据入库。

另一方面，所述多源指标数据智能存储的管理装置，所述管理装置包括：

类型划分单元，用于根据指标数据来源不同，将指标数据划分为多种类型，这里指标数据的类型有三种，分别为指标成果文件类型、第三方指标数据接口类型和复合指标类型；

数据入库单元，用于根据指标数据的类型，通过调度规则将不同类型的指标数据按照统一的对象进行指标数据入库。

本发明的有益效果是：本发明提出了一种多源指标数据智能存储的管理方法，本发明方法可以将不同来源的指标以及指标数据以统一的形式按照一定的规则存储到不同的数据库中，并给空间规划业务提供统一的、高效的、便捷的接口服务；本发明能有效的解决单一体系指标存储管理存在的问题，并能很好的降低开发成本，缩短项目周期，提高生产效率。本发明通过分布式多表多库以及多种存储模式解决了不同指标数据查询慢的问题，将查询效率提升10倍以上。

附图说明