[发明专利]一种基于数据抽取和系统建模的高效数据共享平台

权利要求书

1.一种基于数据抽取和系统建模的高效数据共享平台，其特征在于，包括：

数据获取系统，包括：应用系统数据接入模块、感知终端数据数据获取模块、地理信息数据获取模块、环境数据采集模块、用户数据共享模块以及网页主动爬取模块；

数据处理系统，包括：数据处理与分布式存储模块；其中数据处理与分布式存储模块基于对元数据的统一管理，将信息进行统一归档入库，完成标准化以及多源异构数据的整合；

提交系统，用于连接所述数据获取系统以及所述数据处理系统，包括元数据统一管理模块；

功能系统，包括：任务管理系统TMS、资源管理系统RMS、资源分发系统RDS、服务发布系统SPS、用户管理系统UMS、数据集成系统DIS以及作业管理系统JMS；

支持系统，用于连接所述数据处理系统和所述功能系统；包括综合数据管理模块和公共安全服务模块，其中综合数据管理模块内部使用数据抽取和系统建模对数据进行抽取后的管理；

对象系统，包括应用使用者端、应用提供者端、平台管理者端、资源提供者端、资源管理者端以及资源审核者端；

服务系统，用于连接所述支持系统和所述对象系统；为实现向对象提供云模式下的数据共享服务，服务系统采用基于Web的云服务模式；

所述系统建模包括角色组模型、信息模型、特征模型以及业务模型；

所述信息模型采用类图的方式表达，用于展现数据共享领域的实体和实体之间的关系；通过角色和用例的分析获得其中的操作者及被操作实体，提炼之间的关系生成信息模型；

所述特征模型关注识别出领域中软件系统最突出的特征，所述特征包含领域中对用户可见的外观形态或特色，同时可以定义领域中共性的特征，以及与相关系统不同的特征；所述特征模型根据相关系统中必选、可选、任选的特征定义领域，并据此抽象出特征模型；

所述业务模型通过对领域中业务需求分析的基础上，结合特征模型的定义，抽象获得，包括：数据共享服务层、数据作业管理层和空间数据服务层；其中：

所述数据共享服务层用于支持数据共享业务，资源提供者可通过配置抽取业务实现从其他应用系统提供的服务接口提取数据、从网页、文本文件中抽取信息，这些数据包含结构化数据与非结构化数据；

所述数据作业管理层用于作业管理业务，应用使用者向平台提交数据共享定制服务请求，审核者对该请求进行审核；审核通过后，应用提供者根据请求内容创建，编辑作业流程，从数据共享任务资源库中选取所需的数据共享任务；若数据共享任务资源库中不存在所需的数据共享任务，向资源提供者发出请求，其资源提供着根据请求构建所需的数据共享任务；应用使用者根据输入数据元数据、所选任务元数据、目标数据元数据编辑相应流程，配置作业元数据，完成配置后将作业存储至数据共享作业库或以文件形式存储；应用使用者从数据共享作业资源库中载入其拥有的数据共享作业，配置调度信息，执行数据共享作业；数据共享作业执行时，载入其流程中使用到的数据共享任务，并执行数据共享任务，最终实现对资源及其元数据的更新；

所述空间数据服务层用于众包模式下的空间数据更新业务，平台管理者根据需求以及当前用户认证状态，制定众包任务，将任务加入众包任务库，并发表众包任务列表；应用使用者领取自己有能力完成的众包任务，添加修改图层、标绘、兴趣点、标注信息；在编辑过程中，首先载入当前现状库数据，将编辑更新的数据存储至临时库中；完成众包任务后，提交众包任务成果；资源审核者审核该众包任务结果；审核通过后，将变更数据更新至现状库，历史数据更新至历史库中，从现状库中删除历史数据。

2.根据权利要求1所述的一种基于数据抽取和系统建模的高效数据共享平台，其特征在于，所述数据抽取包括从文本文件、应用系统、网页、数据库抽取信息，经过数据转换服务、数据加载服务完成数据更新；在进行数据转换前将抽取的数据与数据模板进行映射，确定数据转换方式，数据模板与数据映射关系分别存储到数据模板库与影射关系库；数据加载服务的执行也依据数据映射关系确定最终的数据加载目标；数据共享任务存储在数据共享任务库，数据共享作业存储在数据共享作业库，从数据共享作业库中载入数据共享作业对其进行编辑，再将修改后的作业更新至数据共享作业库；应用用户领取众包任务，利用空间数据编辑服务使用模型标绘库进行标绘，提交众包任务，将变更数据更新到空间数据临时库，通过空间数据更新服务，变更数据加载到空间数据现状库，历史数据更新到空间数据历史库；客户端使用空间数据现状库的数据辅助决策。