[发明专利]基于多粒度过滤的日志数据收集方法及系统

摘要

本发明公开了基于多粒度过滤的日志数据收集方法及系统，包括以下，获取已有的日志数据，确定已有的日志数据的聚类个数C，并从已有的日志数据中随机挑选相应的C个日志数据作为C个聚类数的聚类中心vi；计算所有的已有的日志数据到每个聚类中心的距离dij，并将每个日志数据归于与其计算距离最小的聚类中心对应的类别中；将每个数据类别中的数据的特征值进行平均以得到更新的聚类中心vi"；最终形成C个稳定的数据类别；获取未知的日志数据，计算并提取C个距离中距离最小的k个距离对应的稳定的数据类别；计算并选取隶属度计算值最高的的数据类别，将未知的日志数据存入该数据类别中。本发明能够较佳的对复杂的日志数据进行归类，方便了日志数据的管理。