[发明专利]大数据环境下的数据挖掘系统及其应用

摘要

本发明公开了大数据环境下的数据挖掘系统及其应用，数据挖掘系统包括数据预处理模块、数据挖掘模块、模式评估模块、知识表示和系统后台管理模块，该系统可应用于物联网系统、地理信息系统、电力调度自动化系统、远程监控系统、农业信息化系统、金融保险信息系统、电子商务系统。该系统为海量的数据信息库、大量挖掘算法和各类可视化构件的编写事先制定好标准，把符合标准的构件全部接人平台，以便其他组件调用；通过利用GEF和RCP技术使用户拥有简单便捷的操作界面，提高数据挖掘的可视化；它能够支持大量的数据预处理算法、多种结构复杂的数据源和许多经典的挖掘算法，能够在多行业多领域的分析搜索和研究决策。

主权项

1.大数据环境下的数据挖掘系统，其特征在于，所述数据挖掘系统包括：数据预处理模块，用于从数据源中收集所需要挖掘的原始数据，再利用清洗算法和调用模型的相关接口服务对所述的原始数据进行清洗操作并输出清洗结果，然后按类别集成所述清洗结果并选出有利用价值的相关数据，最后将预处理结果通过类型转化后提交给控制层；数据挖掘模块，首先通过控制器将所述数据预处理模块的预处理结果按类别分开；其次利用相应的分类算法对不同种类的数据进行分析研究，查找出隐避的有价值数据；最后控制器根据抽样结果类型选择最优的挖掘类型和挖掘算法，完成数据挖掘任务；并将挖掘结果提交给评估层；模式评估模块，通过对所述数据挖掘模块的挖掘结果实现模式对比和评估，鉴别出最理想的挖掘结果并进行分离；知识表示，根据用户特点和个性需求来评估知识表示模式，对所述模式评估模块选出的最优挖掘结果进行可视化处理后利用知识表示的形式展示给用户；系统后台管理模块，用于对数据挖掘平台的管理，包括用户个人信息、平台安全、系统服务和数据资源；通过后台管理模块为用户提供相关数据、服务和软件来响应来自客户端的请求信息。