[发明专利]一种面向微博的定制化筛选系统及方法

摘要

本发明涉及一种面向微博的定制化筛选系统及方法，其中一种面向微博的定制化筛选系统包括后台模块和交互模块，所述后台模块用于采集数据、分析数据、本地存储、建立索引并提供检索功能；所述交互模块与后台模块信息交互，并提供与后台模块交互的WEB界面。本系统是解决信息过载的一种解决方案，即从庞大的微博数据中，针对性地筛选出用户关注的一类信息，为用户过滤掉一大批非关注信息，并能将这些数据本地化存储，方便用户长期使用；并通过验证机制增强系统本身的安全性；整个系统的工作逻辑清晰、流畅，减少了系统各模块之间的耦合度，每模块内部都由若干模块组成，有利于每模块功能的扩展。

主权项

一种面向微博的定制化筛选系统，其特征在于，包括后台模块和交互模块，所述后台模块用于采集数据、分析数据、本地存储、建立索引并提供检索功能；所述交互模块与后台模块信息交互，并提供与后台模块交互的WEB界面；  所述后台模块依次包括信息交互的采集模块、分析模块、索引模块和检索模块；所述采集模块，采集原始微博数据；所述分析模块对采集模块传输的数据进行抽取、去重及过滤得到有效数据，并对有效数据分类、存储，所述过滤包括对垃圾、广告及黄反数据的过滤；所述索引模块对分析模块传输至的数据进行中英文分词，根据分词的结果建立倒排索引及增量索引，并根据微博状态文件定期的删除索引；所述检索模块接收交互模块传输的检索关键字，并对检索关键字进行纠错、同义词转换、分词及优化，并对检索结果进行筛选和排序，进一步将排序结果返回交互模块。