[发明专利]网络文本数据内容探测高速处理方法

权利要求书

1.网络文本数据内容探测高速处理方法，包括以下步骤：

步骤a，储存器从闪存器中复制所需词典；

步骤b，网卡将网包数据发送至控制处理部件；

步骤c，控制处理部件根据网包数据的内容进行分类处理：相关数据包发送至网络内容处理部件；其他数据包直接转发至网卡中通过；

步骤d，网络内容处理部件内的网络协议内容解析部件接受从控制处理部件发来的相关数据包，并将相关数据包通过包重组，还原为文本，发送至文本特征抽取部件；

步骤e，文本特征抽取部件接受文本后，从储存器中调用相应词典对文本进行查找；查找结果输出为特征词语列表、非特征重要词语列表；

步骤f，特征扩展部件从储存器中调用相应词典对非特征重要词语列表进行查找、扩展处理，将非特征重要词语列表转换为特征词语列表+折算系数；

步骤g，文本分类部件将步骤e中的特征词语列表、步骤f中的非特征重要词语列表进行扩展、合并处理得到特征词语列表+折算系数，从储存器中调用对应类别的词典进行查找处理，并将处理结果进行累加，根据累加的结果进行类别判定：如果为不良文本，则进行过滤、预警处理；如果为正常文本，则转发至网卡中通过。

2.根据权利要求1所述的网络文本数据内容探测高速处理方法，其特征在于：所述闪存器内储存有分词词典、特征词典、重要词语词典、重要词语VS特征词语映射词典、特征词语分类词典、IP地址黑名单词典。

3.根据权利要求1所述的网络文本数据内容探测高速处理方法，其特征在于：所述相关数据包为社交网络数据包。

4.根据权利要求1所述的网络文本数据内容探测高速处理方法，其特征在于：所述相关数据包还包括网页数据包。

5.根据权利要求1或4所述的网络文本数据内容探测高速处理方法，其特征在于：控制处理部件从储存器中调用IP地址黑名单词典对网页数据包进行查找处理，如果是黑名单中的IP地址，则判断为不良网页，进行过滤、预警处理，如果不是黑名单中的IP地址，则转发至网卡正常通过。

6.根据权利要求1或2所述的网络文本数据内容探测高速处理方法，其特征在于：步骤e中，从储存器中调用分词词典。

7.根据权利要求1所述的网络文本数据内容探测高速处理方法，其特征在于：步骤e中，查找采用正向匹配查找、反向匹配查找。

8.根据权利要求1、2或7所述的网络文本数据内容探测高速处理方法，其特征在于：步骤e中，查找结果一致时，从储存器中调用特征词典、重要词语词典对文本进行词语查找；查找结果不一致时，从储存器中调用特征词典、重要词语词典对文本进行字符串查找。

9.根据权利要求1或2所述的网络文本数据内容探测高速处理方法，其特征在于：步骤f中，从储存器中调用重要词语VS特征词语映射词典。

10.根据权利要求1或2所述的网络文本数据内容探测高速处理方法，其特征在于：步骤g中，从储存器中调用特征词语分类词典。

11.根据权利要求1所述的网络文本数据内容探测高速处理方法，其特征在于：闪存器通过互联网连接内容处理云服务器更新词典。

12.根据权利要求1所述的网络文本数据内容探测高速处理方法，其特征在于：用户可通过数据终端上的控制台上传需要订制的内容至内容处理云服务器。

13.根据权利要求13所述的网络文本数据内容探测高速处理方法，其特征在于：用户添加的内容还可以包括视频信息。