[发明专利]一种面向实时大数据平台Storm的属性抽取系统

权利要求书

1.一种面向实时大数据平台Storm的属性抽取系统，其特征在于，包括：

搭建Storm集群环境；开启Storm集群环境；开发拓扑结构，上传拓扑任务到Storm集群；开启代码注入器，动态注入监控代码；启动监控设备上的监控器，感知Storm集群自身对象以及拓扑结构中的对象；收集Storm环境属性，存入存储设备；

为了获取Storm某一个拓扑中所有任务的属性，Storm的一个拓扑结构中的所有螺栓和喷口需要分别继承框架中的BaseMetricBolt和BaseMetricSpout，同时需要在上传拓扑之前开启监控服务器，其开启入口在TopoMetricProtocolImpl中；BaseMetricBolt和BaseMetricSpout分别继承于BaseRichBolt与BaseRichSpout，CpuMetric与TrafficMetric分别实现了IMetric。

2.如权利要求1所述的面向实时大数据平台Storm的属性抽取系统，其特征在于，在开发过程中的静态属性，包括远程调用的实现、低耦合的属性提取机制的实现以及与Storm的代码+融合的实现。

3.如权利要求1所述的面向实时大数据平台Storm的属性抽取系统，其特征在于，面向实时大数据平台Storm的属性抽取系统的存储结构，包括任务层面、拓扑层面以及集群层面。

4.如权利要求1所述的面向实时大数据平台Storm的属性抽取系统，其特征在于，对于一个Storm的拓扑结构，如果需要所述面向实时大数据平台Storm的环境属性抽取系统来进行对属性的提取，需要在拓扑结构中另外新开一个计算任务，所述计算任务专门用来获取Storm实时平台中对应的拓扑结构中的每一个计算任务的属性。

5.如权利要求4所述的面向实时大数据平台Storm的属性抽取系统，其特征在于，所述新的计算任务就是TopologyMetricsConsumer类的一个实例，其继承于Storm实时框架内部的IMetricsConsumer。

6.如权利要求1所述的面向实时大数据平台Storm的属性抽取系统，其特征在于，除了基于Storm实时计算框架本身的API之外，其通信部分还依赖于远程过程调用金和序列化机制的一个来有效实现HadoopRPC。

7.如权利要求1所述的面向实时大数据平台Storm的属性抽取系统，其特征在于，TopologyMetricsEvent组合了ComponentMetricsEvent，同时实现了HadoopRPC中的Writable接口；其远程过程调用机制体现在TopoMetricProtocolImpl实现了MetricProtocol，而MetricProtocol同时也继承了HadoopRPC的VersionedProtocol。

8.如权利要求7所述的面向实时大数据平台Storm的属性抽取系统，其特征在于，当监控服务器启动之后，一旦TopologyMetricsConsumer的实例开始接受Storm中的对应的拓扑结构的属性之后，通过HadoopRPC实现的远程过程调用，监控服务器通过TopoMetricProtocolImpl来调用Storm集群中的拓扑结构的属性数据。