[发明专利]一种流数据的分类方法及其装置和系统

摘要

本发明提供一种流数据的分类方法及其装置和系统，所述流数据分类系统包括数据源处理器模块、流数据分类装置及评价处理器模块，数据源处理器模块接收外部数据流并将数据流实时地发送到流数据分类装置中进行分类判定，评价处理器模块用于对分类判定结果进行在线评价以得到的分类判定结果正确率并予以输出；另外，基于流数据分类的思想，还提供了一种流数据分类方法。本发明采用数据的水平化分割方法，实现了数据的横向扩展，数据的水平扩展进一步实现了相关组建的分布式快速处理。

主权项

一种流数据分类装置，其特征在于，包括：分布处理器模块，用于接收包括内容事件的流数据，并将所述流数据分别标记为测试数据和训练数据，及将所述测试数据和训练数据依次予以随机均衡地分发出去；属性统计处理器模块，用于将接收所述训练数据，并对所述训练数据中每个内容事件的属性信息进行统计以得到所述每个所述内容事件的属性统计信息，并将所述属性统计信息实时地更新输出；聚合处理器模块，用于接收所述属性统计信息和所述测试数据，根据所述属性统计信息计算得到所述测试数据的后验概率，并选取其中最大的后验概率作为待实时分类判定的所述测试数据的分类判定结果并予以输出。