[发明专利]一种文本并行数据挖掘系统及方法

摘要

本发明公开了一种文本并行数据挖掘系统及方法，其中系统包括：数据获取模块，所述数据获取模块用于获取多个原始文本数据集；数据清洗模块，所述数据清洗模块用于对所述原始文本数据集进行预处理，以得到对应的多个关键词条集；中央处理模块，所述中央处理模块用于根据所述关键词条集的数量进行解析，得到解析结果；线程配置模块，所述线程配置模块根据所述解析结果配置线程进行处理；数据存储模块，所述数据存储模块用于实时存储处理结果；本发明并行数据挖掘架构扩展了数据挖掘的应用范围，同时可根据需要优先处理出现频率较高的文本集。