[发明专利]一种反爬虫方法、终端及计算机可读介质在审

专利信息
申请号: 201810685659.3 申请日: 2018-06-27
公开(公告)号: CN108898009A 公开(公告)日: 2018-11-27
发明(设计)人: 邵壮 申请(专利权)人: 平安科技(深圳)有限公司
主分类号: G06F21/54 分类号: G06F21/54
代理公司: 广州三环专利商标代理有限公司 44202 代理人: 郝传鑫;熊永强
地址: 518000 广东省深*** 国省代码: 广东;44
权利要求书: 查看更多 说明书: 查看更多
摘要:
搜索关键词: 爬虫 脚本 终端 链接 计算机可读介质 脚本库 目标网页 启动指令 嵌入目标 触发 加载 绕过 网页 渲染 消耗 检测 访问
【权利要求书】:

1.一种反爬虫方法,其特征在于,包括:

获取JS挖矿脚本库,所述JS挖矿脚本库包括至少一个JS挖矿脚本;

生成所述至少一个JS挖矿脚本的链接,将所述至少一个JS挖矿脚本的链接嵌入目标网页;

当检测到所述至少一个JS挖矿脚本的链接的启动指令时,触发访问所述目标网页的终端加载并执行所述至少一个JS挖矿脚本。

2.根据权利要求1所述的方法,其特征在于,所述获取JS挖矿脚本库,包括:

建立所述JS挖矿脚本库,所述JS挖矿脚本库包括第一JS挖矿脚本和第二JS挖矿脚本;

其中,所述第一JS挖矿脚本是WebAssembly语言的脚本,所述第二JS挖矿脚本是JS语言的脚本。

3.根据权利要求1所述的方法,其特征在于,所述将所述至少一个JS挖矿脚本的链接嵌入目标网页,包括:

根据历史记录中所述目标网页中各位置区域的数据信息被爬取的概率确定第一位置区域,所述第一位置区域是所述目标网页中各位置区域的数据信息被爬取概率最大的位置区域;

将所述至少一个JS挖矿脚本的链接嵌入所述目标网页的所述第一位置区域。

4.根据权利要求2所述的方法,其特征在于,所述当检测到所述至少一个JS挖矿脚本的链接的启动指令时,触发访问所述目标网页的终端加载并执行所述至少一个JS挖矿脚本,包括:

当检测到所述至少一个JS挖矿脚本的链接的启动指令时,触发访问所述目标网页的终端根据所述终端使用的浏览器所支持的语言,选取所述第一JS挖矿脚本或第二JS挖矿脚本;

调用所述终端使用的浏览器加载并执行所述终端选取的所述第一JS挖矿脚本或第二JS挖矿脚本。

5.根据权利要求4所述的方法,其特征在于,所述触发访问所述目标网页的终端根据所述终端使用的浏览器所支持的语言,选取所述第一JS挖矿脚本或第二JS挖矿脚本,包括:

触发访问所述目标网页的终端判断所述终端使用的浏览器版本号是否为预设版本号集合中的任意一种;

如果判断结果为是,则确定所述终端使用的浏览器支持WebAssembly语言,从所述JS挖矿脚本库中选取所述第一JS挖矿脚本;

如果判断结果为否,则确定所述终端使用的浏览器不支持WebAssembly语言,从所述JS挖矿脚本库中选取所述第二JS挖矿脚本。

6.根据权利要求2所述的方法,其特征在于,所述将所述至少一个JS挖矿脚本的链接嵌入目标网页,包括:

生成所述第一JS挖矿脚本的链接和所述第二JS挖矿脚本的链接;

根据历史记录中所述目标网页中被支持所述WebAssembly语言的浏览器爬取各位置区域的数据信息的概率确定第二位置区域,所述第二位置区域是所述目标网页中各位置区域的数据信息被支持所述WebAssembly语言的浏览器爬取概率最大的位置区域;

根据历史记录中所述目标网页中被不支持所述WebAssembly语言的浏览器爬取各位置区域的数据信息的概率确定第三位置区域,所述第三位置区域是所述目标网页中各位置区域的数据信息被不支持所述WebAssembly语言的浏览器爬取概率最大的位置区域;

将所述第一JS挖矿脚本的链接嵌入所述目标网页的所述第二位置区域,以及将所述第二JS挖矿脚本的链接嵌入所述目标网页的所述第三位置区域。

7.根据权利要求6所述的方法,其特征在于,所述当检测到所述至少一个JS挖矿脚本的链接的启动指令时,触发访问所述目标网页的终端加载并执行所述至少一个JS挖矿脚本,包括:

当检测到所述第一JS挖矿脚本的链接的启动指令时,触发访问所述目标网页的终端判断所述终端使用的浏览器版本号是否为预设版本号集合中的任意一种;

如果判断结果为是,则确定所述终端使用的浏览器支持所述WebAssembly语言,并触发访问所述目标网页的终端使用的浏览器加载并执行所述第一JS挖矿脚本;

如果判断结果为否,则在检测到所述第二JS挖矿脚本的链接的启动指令时,触发访问所述目标网页的终端使用的浏览器加载并执行所述第二JS挖矿脚本。

下载完整专利技术内容需要扣除积分,VIP会员可以免费下载。

该专利技术资料仅供研究查看技术是否侵权等信息,商用须获得专利权人授权。该专利全部权利属于平安科技(深圳)有限公司,未经平安科技(深圳)有限公司许可,擅自商用是侵权行为。如果您想购买此专利、获得商业授权和技术合作,请联系【客服

本文链接:http://www.vipzhuanli.com/pat/books/201810685659.3/1.html,转载请声明来源钻瓜专利网。

×

专利文献下载

说明:

1、专利原文基于中国国家知识产权局专利说明书;

2、支持发明专利 、实用新型专利、外观设计专利(升级中);

3、专利数据每周两次同步更新,支持Adobe PDF格式;

4、内容包括专利技术的结构示意图流程工艺图技术构造图

5、已全新升级为极速版,下载速度显著提升!欢迎使用!

请您登陆后,进行下载,点击【登陆】 【注册】

关于我们 寻求报道 投稿须知 广告合作 版权声明 网站地图 友情链接 企业标识 联系我们

钻瓜专利网在线咨询

周一至周五 9:00-18:00

咨询在线客服咨询在线客服
tel code back_top