[发明专利]一种基于功能组件化的大数据综合管理平台构建方法

说明书

技术领域

本发明属于大数据综合应用技术，具体涉及一种基于功能组件化的大数据综合管理平台构建方法。

背景技术

大数据分析技术的全流程一般包括数据采集、数据治理、数据分析、数据可视化及数据应用五个步骤，针对这五个步骤市面上有较多的产品可支撑使用，然而由不同公司开发的不同产品，往往难以融合在一起，会导致出现一个部门使用多个系统却不能互通的情况；另外一种情况则是直接定制一套大数据分析的解决方案，然而定制成本高，且周期长，这些因素会制约政企使用大数据技术支撑应用的使用。

发明内容

本发明提出一种基于功能组件化的大数据综合管理平台构建方法，目的在于为克服现有技术中所存在的问题而进行的创新应用，具体技术内容如下：

一种基于功能组件化的大数据综合管理平台构建方法，其包含有服务内容功能化步骤、功能组件化步骤和组装步骤；

所述服务内容功能化步骤是：对大数据全生命周期服务内容的梳理，将服务内容进行功能化转换，生成以可操作功能点为单位的多个功能模型，所述服务内容包括对数据的采集、治理、存储、分析、可视化及使用；

所述功能组件化步骤是：根据所述可操作功能点所完成的服务内容进行划分，分离组件边界和责任，明确每个组件所对应的服务内容及逻辑关系，归类成基础管理组件、数据处理组件和应用模型组件；

所述组装步骤是：根据应用需求于库中抽取上述的基础管理组件、数据处理组件和应用模型组件进行组装以生成大数据管理平台，其中，组件的抽取必须包含基础管理组件。

基于Dubbo模型进行所述功能组件化步骤。

所述功能组件化步骤中对组件的逻辑关系进行梳理整合并建立索引，用于在所述组装步骤中展示组件之间存在的逻辑联系，从而指导用户对关联业务流程的组件进行选择组装。

本发明的有益效果是：对比市面现有的大数据产品，本技术方法可有效降低整个平台的耦合度，可通过使用不同的组件快速为用户构建和交付完整大数据计算和处理框架的能力，既可降低客户构建大数据平台的成本，又可以提高平台的实用性。同时，在对平台的维护上，由于采用的是组件化模式，在出现问题的时候，可以用排除法直接移除组件，或者根据报错的组件快速定位问题，大大提高维护效率。

附图说明

图1为本发明的基于功能组件化的大数据综合管理平台构建方法的流程框架示意图。

图2为本发明的基于功能组件化的大数据综合管理平台构建方法的服务内容功能化示意图。

图3为本发明的基于功能组件化的大数据综合管理平台构建方法的功能组件逻辑联系示意图。

图4为本发明的基于功能组件化的大数据综合管理平台构建方法的构建实例示意图一。

图5为本发明的基于功能组件化的大数据综合管理平台构建方法的构建实例示意图二。

具体实施方式

如下结合附图，对本申请方案作进一步描述：

参见附图1至3，一种基于功能组件化的大数据综合管理平台构建方法，其包含有服务内容功能化步骤、功能组件化步骤和组装步骤；

所述服务内容功能化步骤是：对大数据全生命周期服务内容的梳理，将服务内容进行功能化转换，生成以可操作功能点为单位的多个功能模型，所述服务内容包括对数据的采集、治理、存储、分析、可视化及使用；

所述功能组件化步骤是：根据所述可操作功能点所完成的服务内容进行划分，分离组件边界和责任，明确每个组件所对应的服务内容及逻辑关系，归类成基础管理组件、数据处理组件和应用模型组件；

所述组装步骤是：根据应用需求于库中抽取上述的基础管理组件、数据处理组件和应用模型组件进行组装以生成大数据管理平台，其中，组件的抽取必须包含基础管理组件。

参见附图4，本发明基于Dubbo模型进行所述功能组件化步骤。

一般来说，现有的系统构成在功能的藕合性上是比较紧密的，如A功能必须与B功能、C功能同时存在才可以使用，三者之间不可分离，然而在实际情况下，可能B/C功能用户都是不必要的，但为了使用A功能，用户却必须要支付BC功能的使用成本，这对用户来说是不合理的，故在对本专利在对服务进行功能化后，同时采用组件化式的开发方式对功能进行开发，在降低系统功能藕合性的同时，又能维持各功能之间的逻辑关系。