[发明专利]面向网络流式数据的事件实时过滤方法和系统

权利要求书

1.一种面向网络流式数据的事件实时过滤方法，所述方法包括： 

步骤1）响应于加载事件规则的请求来加载事件规则，所述事件规则包括过滤规则列表和信息源范围； 

步骤2）根据所加载的事件规则对网络流式数据进行过滤。 

2.根据权利要求1所述的方法，所述步骤1）包括： 

步骤11）响应于加载事件规则的请求读取相应的事件规则； 

步骤12）根据从所述事件规则中提取的所有关键词构建trie树。

3.根据权利要求2所述的方法，所述步骤2）包括： 

步骤2-1）基于所构建的trie树对网络流式数据进行过滤，获取包含所述关键词的文档； 

步骤2-2）基于所述过滤规则列表从包含所述关键词的文档中提取出符合全部过滤规则的文档； 

步骤2-3）从所述符合全部过滤规则的文档中提取符合所述信息源范围的文档。 

4.根据权利要求3所述的方法，所述步骤2）还包括： 

步骤2-4）对经步骤2-3）得到的符合所述信息源范围的文档进行打分的步骤，每个文档的分值weight以如下方式计算： 

其中e是自然常数，n是该文档中包含的关键词的总数，i代表是该文档中包含的第i个关键词的序号，x_i是该第i个关键词在该文档中的命中次数，w_i是该第i个关键词的权重。 

5.根据权利要求1所述的方法，所述步骤1）包括： 

（1）接收加载事件规则的请求； 

（2）判断目前是否存在正在被用于建Trie树的事件规则； 

（3）如果存在，则备份事件规则，如果之前有已经备份的事件规则，则覆盖；如果不存在直接建立并保存临时Trie树； 

（4）判断全局Trie树是否存在并且被使用；如果不存在或者没有被使用则使用该新建的临时Trie树来更新全局Trie树；否则等待全局Trie 树使用完毕之后再更新全局Trie树； 

（5）判断是否有备份的事件规则，如果有，则返回（2）继续执行，如果没有，则结束。 

6.根据权利要求5所述的方法，所述步骤2）包括： 

步骤b1，读取一组文档并将其封装成文本序列； 

步骤b2：判断Trie树是否建立完毕，如果全局Trie树已经建好则进行下一步，否则等待一秒； 

步骤b3：利用全局Trie树对所组织的文本序列进行关键词匹配； 

步骤b4：基于该所加载的事件规则中的过滤规则对步骤b3扫描全局trie树得到的匹配结果进行解析，以得到符合过滤规则列表中所有过滤规则的文档； 

步骤b5：过滤掉不在事件规则要求的信息源范围之中的文档； 

步骤b6：输出并保存过滤结果，并返回步骤b1。 

7.一种面向网络流式数据的事件实时过滤系统，所述系统包括： 

事件规则加载装置，用于响应于加载事件规则的请求来加载事件规则，所述事件规则包括过滤规则列表和信息源范围； 

过滤装置，用于根据所加载的事件规则对网络流式数据进行过滤。 

8.根据权利要求7所述的系统，所述事件规则加载装置被配置为执行： 

（1）接收加载事件规则的请求； 

（2）判断目前是否存在正在被用于建Trie树的事件规则； 

（3）如果存在，则备份事件规则，如果之前有已经备份的事件规则，则覆盖；如果不存在直接建立并保存临时Trie树； 

（4）判断全局Trie树是否存在并且被使用；如果不存在或者没有被使用则使用该新建的临时Trie树来更新全局Trie树；否则等待全局Trie树使用完毕之后再更新全局Trie树； 

（5）判断是否有备份的事件规则，如果有，则返回（2）继续执行，如果没有，则结束。