[发明专利]防止恶意抓取的方法和防护装置有效
申请号: | 201410806643.5 | 申请日: | 2014-12-22 |
公开(公告)号: | CN104506525B | 公开(公告)日: | 2018-04-20 |
发明(设计)人: | 李纪峰 | 申请(专利权)人: | 北京奇安信科技有限公司 |
主分类号: | H04L29/06 | 分类号: | H04L29/06 |
代理公司: | 北京路浩知识产权代理有限公司11002 | 代理人: | 李相雨 |
地址: | 100015 北京市朝阳区酒仙*** | 国省代码: | 北京;11 |
权利要求书: | 查看更多 | 说明书: | 查看更多 |
摘要: | 本发明提供了一种防止恶意抓取的方法和防护装置,该方法包括位于网站服务器侧的防护装置识别用于抓取所述网站服务器中资源的抓取请求;判断所述抓取请求的来源IP地址是否属于IP地址白名单中的IP地址;如果所述来源IP地址不属于IP地址白名单中的IP地址,则拦截所述抓取请求。本发明提供的技术方案对于伪装搜索引擎发起的恶意抓取请求能够进行有效的拦截。 | ||
搜索关键词: | 防止 恶意 抓取 方法 防护 装置 | ||
【主权项】:
一种防止恶意抓取的防护装置,其特征在于,包括:识别模块,用于识别用于抓取网站服务器中的资源的抓取请求;判断模块,用于判断所述识别模块识别的所述抓取请求的来源互联网协议IP地址是否属于IP地址白名单中的IP地址;拦截模块,用于在所述判断模块判断所述来源IP地址不属于IP地址白名单中的IP地址,拦截所述抓取请求;还包括上报模块,用于将IP地址白名单上传至服务器;IP地址白名单获取模块,用于接受服务器发送的IP地址白名单,更新自身生成的IP地址白名单;所述服务器发送的IP地址白名单是多个客户端上报的IP地址白名单生成的包含更多IP地址的IP地址白名单;判断所述识别模块识别的所述抓取请求的来源互联网协议IP地址是否属于IP地址白名单中的IP地址,具体包括:确定发起该抓取请求的搜索引擎的域名,在搜素引擎域名与IP地址的对应关系表中查找该域名对应的IP地址,如果查找到的IP地址与该抓取请求的来源IP地址一致,则认为该来源IP地址为IP地址白名单中的地址,如果不一致,则判定该来源IP地址不是IP地址白名单中的地址。
下载完整专利技术内容需要扣除积分,VIP会员可以免费下载。
该专利技术资料仅供研究查看技术是否侵权等信息,商用须获得专利权人授权。该专利全部权利属于北京奇安信科技有限公司,未经北京奇安信科技有限公司许可,擅自商用是侵权行为。如果您想购买此专利、获得商业授权和技术合作,请联系【客服】
本文链接:http://www.vipzhuanli.com/patent/201410806643.5/,转载请声明来源钻瓜专利网。