[发明专利]企业运营数据的处理方法

权利要求书

1.企业运营数据的处理方法，其特征在于，包括：

数据抽取步骤，用于从多种不同系统中抽取数据；

数据存储与处理步骤，用于将抽取到的数据存储到分布式存储架构搭建数据仓库中；

数据挖掘与数据计算，用于对运营数据进行数据挖掘与数据计算，以获取可满足单业务分析及多业务分析需要的数据。

2.根据权利要求1所述的企业运营数据的处理方法，其特征在于，所述数据抽取步骤包括：

通过SmartHub从不同的企业运营系统中抽取数据；其中所述SmartHub为支持DB、日志、API类型的数据中进行数据采集的插件，且能够对数据采集的过程进行实时的一致性检测，并对采集过程中出现的异常进行及时告警。

3.根据权利要求2所述的企业运营数据的处理方法，其特征在于，所述企业运营系统包括以下的至少一种：ERP、财务管控、CRM、PLM、人力资源、生产制造数据系统；其中所述数据抽取步骤用于从所述企业营业系统的数据接口或中间库进行历史数据与实时数据的抽取；还用于从没有数据接口或中间库的企业运营系统中的数据通过EXCEL表的形式进行数据导入。

4.根据权利要求1所述的企业运营数据的处理方法，其特征在于，所述数据存储与处理步骤包括：通过基于SG-RDB-PG数据库的分布式存储架构搭建数据仓库，在数据仓库内进行企业运营数据的存储、清洗转换以及加载。

5.根据权利要求4所述的企业运营数据的处理方法，其特征在于，所述数据存储与处理步骤包括：

从数据源获取的分散、零乱、标准不统一的原始企业运营数据初步存放在贴源库中，贴源库用于数据溯源，当数据应用出现偏差或不符时能够通过贴源数据追踪到原数据、原系统，同时为后续清洗转换、统计分析提供原始数据支撑；

采用ETL软件对贴源库中的不符合要求的数据进行清洗，主要包括不完整的数据、错误的数据、重复的数据三大类。同时对清洗后的数据进行不一致数据转换与整合，将不同业务系统的相同类型的数据统一；处理后的数据通过ETL工具加载到明细库；

对明细库中业务系统数据根据业务需求进行深度处理，如数据粒度转换、商务规则计算，所得数据存放在汇总库；

为满足数据挖掘与应用的需要，针对数据仓库使用WebService开发数据流通接口。

6.根据权利要求1所述的企业运营数据的处理方法，其特征在于，所述数据存储与处理步骤包括：

数据挖掘与数据计算，通过基于Hadoop架构、Spark计算引擎搭建的运监大数据平台，对企业运营数据进行分析和计算；其中所述运监大数据平台至少搭载了SnappyData、HDFS、ElasticSearch、Druid组件。

7.根据权利要求6所述的企业运营数据的处理方法，其特征在于，所述数据存储与处理步骤包括：

所述运监大数据平台通过ETL与SQL方式相结合对数据仓库中的数据进行抽取；

根据预设的数据分析预测模型，针对所得运营数据进行数据挖掘与数据计算。