[发明专利]一种网络信息垂直搜索与挖掘处理方法

权利要求书

1.一种网络信息垂直搜索与挖掘处理方法，其特征在于，该方法包括以下步骤：

1)获取网页信息；

2)对获取的网页信息进行结构化处理；

3)对经处理后的数据进行逻辑推理和计算。

2.根据权利要求1所述的一种网络信息垂直搜索与挖掘处理方法，其特征在于，所述的步骤1)获取网页信息步骤如下：

11)下载并保存任务起始页面信息；

12)分析页面信息、分配并保存相关任务；

13)启动任务处理单元，获取任务；

14)各单元执行各自任务，下载并保存相关页面；

15)分析页面信息、分配并保存其他相关任务；

16)循环执行13)-15)步骤，直到所有任务处理结束后任务处理单元逐个结束工作，获得Html文件并将其保存。

3.根据权利要求1所述的一种网络信息垂直搜索与挖掘处理方法，其特征在于，所述的步骤2)对获取的网页信息进行结构化处理步骤如下：

21)读取下载的Html文件信息；

22)将Html文件转为Dom对象，供分析；

23)将Dom对象转为XML数据结构，保存到数据库中；

24)批量分解XML数据到数据库表格中。

4.根据权利要求1所述的一种网络信息垂直搜索与挖掘处理方法，其特征在于，所述的步骤3)对经处理后的数据进行逻辑推理和计算步骤如下：

31)系统第一次运行将所有历史数据下载并结构化分析处理，所有状态相关数据保存到数据库中；

32)下载所有步骤2)处理后的数据；

33)设定任务驱动规则，判断步骤2)处理后的数据的关键指标和历史状态是否一致，若为否，将步骤2)处理后的数据与历史状态对比，得出变化过程。