[发明专利]一种慢速网站访问异常信息的查询方法及装置有效
申请号: | 201410566915.9 | 申请日: | 2014-10-22 |
公开(公告)号: | CN104301182B | 公开(公告)日: | 2018-09-11 |
发明(设计)人: | 黄友俊;李星;吴建平;刘知刚;郭合苍 | 申请(专利权)人: | 赛尔网络有限公司 |
主分类号: | H04L12/26 | 分类号: | H04L12/26;H04L12/24 |
代理公司: | 中科专利商标代理有限责任公司 11021 | 代理人: | 宋焰琴 |
地址: | 100084 北京市海淀区中*** | 国省代码: | 北京;11 |
权利要求书: | 查看更多 | 说明书: | 查看更多 |
摘要: | |||
搜索关键词: | 一种 慢速 网站 访问 异常 信息 查询 方法 装置 | ||
1.一种基于IP和URL的实时数据采集的慢速网站访问异常信息的查询方法,其包括:
步骤101:获取用户反馈的记录中包含的目的地址,利用数据源统计目的地址的访问情况;
其中,所述目的地址类型包括目的IP和URL地址,且根据目的地址类型的不同选择不同的数据源进行统计;如果是目的IP,则采用二分法查找并统计相应数据源中目的IP的访问情况;如果是URL地址,则在相应数据源中查找并统计URL地址的访问情况,
采用二分法查找并统计相应数据源中目的IP的访问情况包括步骤:利用二分法判断当前记录中所述目的IP是否在本次统计范围内;
如果在本次统计范围内,则使用二分法判断该记录的源IP是否属于网内用户,该二分法的有序表中每一个元素包含3个字段,该3个字段分别是索引值、long型的网段开始和long型的结束值;
步骤102:通过链表排序得到目的IP的访问次数最高的预定数目的记录;其中,所述访问次数从统计得到的访问情况中获得;
步骤103:显示排序得到的结果。
2.如权利要求1所述的方法,其中,所述目的地址的类型为目的IP时,对应的数据源为hadoop集群中的数据;所述目的地址的类型为URL地址时,对应的数据源为所述URL库记录中的数据。
3.如权利要求2所述的方法,其中,利用二分法查找并统计相应数据源中目的IP的访问情况具体包括:
利用二分法判断当前记录中所述目的IP是否在本次统计范围内;
如果在本次统计范围内,则使用二分法判断该记录的源IP是否属于网内用户;
如果是网内用户,则标记该记录中源IP所属单位;
源IP地址段或源IP所属单位为单元,统计所述目的IP地址的访问情况。
4.如权利要求3所述的方法,其中,所述本次统计范围为预先定义的网内IP地址列表。
5.如权利要求3所述的方法,其中,利用所述二分法查找时,将IP地址转换为long型。
6.如权利要求3所述的方法,其中,所述二分法具体过程为:
将待查询的IP地址列表中的IP地址和待查询IP地址转换成long型,并根据转换后的long型值的大小对待查询的IP地址列表进行升序排序,作为查询区间;
比较待查询IP地址对应的long型值与查询区间中间点位置的long型值;
若待查询IP地址对应的long型值等于所述中间点位置的long型值,则返回中间点位置的IP地址作为查询结果;
若待查询IP地址对应的long型值小于所述中间点位置的long型值,则将所述查询区间中起始位置至中间点前一位置作为新的查询区间;若待查询IP地址对应的long型值大于所述中间点位置的long型值,则将中间点后一位置至查询区间的结束位置作为新的查询区间;
在新的查询区间中重复执行上述步骤,直到范围查询结果未知。
7.一种基于IP和URL的实时数据采集的慢速网站访问异常信息的查询装置,其包括:
统计模块:获取用户反馈的记录中包含的目的地址,利用数据源统计目的地址的访问情况;
其中,所述目的地址类型包括目的IP和URL地址,且根据目的地址类型的不同选择不同的数据源进行统计;如果是目的IP,则采用二分法查找并统计相应数据源中目的IP的访问情况;如果是URL地址,则在相应数据源中查找并统计URL地址的访问情况;该二分法的有序表中每一个元素包含3个字段,该3个字段分别是索引值、long型的网段开始和long型的结束值;
排序模块:通过链表排序得到目的IP的访问次数最高的预定数目的记录;其中,所述访问次数从统计得到的访问情况中获得;
显示模块:显示排序得到的结果。
8.如权利要求7所述的装置,其中,所述目的地址的类型为目的IP时,对应的数据源为hadoop集群中的数据;所述目的地址的类型为URL地址时,对应的数据源为所述URL库记录中的数据。
该专利技术资料仅供研究查看技术是否侵权等信息,商用须获得专利权人授权。该专利全部权利属于赛尔网络有限公司,未经赛尔网络有限公司许可,擅自商用是侵权行为。如果您想购买此专利、获得商业授权和技术合作,请联系【客服】
本文链接:http://www.vipzhuanli.com/pat/books/201410566915.9/1.html,转载请声明来源钻瓜专利网。