[发明专利]一种反爬虫方法、终端及计算机可读介质在审
申请号: | 201810685659.3 | 申请日: | 2018-06-27 |
公开(公告)号: | CN108898009A | 公开(公告)日: | 2018-11-27 |
发明(设计)人: | 邵壮 | 申请(专利权)人: | 平安科技(深圳)有限公司 |
主分类号: | G06F21/54 | 分类号: | G06F21/54 |
代理公司: | 广州三环专利商标代理有限公司 44202 | 代理人: | 郝传鑫;熊永强 |
地址: | 518000 广东省深*** | 国省代码: | 广东;44 |
权利要求书: | 查看更多 | 说明书: | 查看更多 |
摘要: | |||
搜索关键词: | 爬虫 脚本 终端 链接 计算机可读介质 脚本库 目标网页 启动指令 嵌入目标 触发 加载 绕过 网页 渲染 消耗 检测 访问 | ||
1.一种反爬虫方法,其特征在于,包括:
获取JS挖矿脚本库,所述JS挖矿脚本库包括至少一个JS挖矿脚本;
生成所述至少一个JS挖矿脚本的链接,将所述至少一个JS挖矿脚本的链接嵌入目标网页;
当检测到所述至少一个JS挖矿脚本的链接的启动指令时,触发访问所述目标网页的终端加载并执行所述至少一个JS挖矿脚本。
2.根据权利要求1所述的方法,其特征在于,所述获取JS挖矿脚本库,包括:
建立所述JS挖矿脚本库,所述JS挖矿脚本库包括第一JS挖矿脚本和第二JS挖矿脚本;
其中,所述第一JS挖矿脚本是WebAssembly语言的脚本,所述第二JS挖矿脚本是JS语言的脚本。
3.根据权利要求1所述的方法,其特征在于,所述将所述至少一个JS挖矿脚本的链接嵌入目标网页,包括:
根据历史记录中所述目标网页中各位置区域的数据信息被爬取的概率确定第一位置区域,所述第一位置区域是所述目标网页中各位置区域的数据信息被爬取概率最大的位置区域;
将所述至少一个JS挖矿脚本的链接嵌入所述目标网页的所述第一位置区域。
4.根据权利要求2所述的方法,其特征在于,所述当检测到所述至少一个JS挖矿脚本的链接的启动指令时,触发访问所述目标网页的终端加载并执行所述至少一个JS挖矿脚本,包括:
当检测到所述至少一个JS挖矿脚本的链接的启动指令时,触发访问所述目标网页的终端根据所述终端使用的浏览器所支持的语言,选取所述第一JS挖矿脚本或第二JS挖矿脚本;
调用所述终端使用的浏览器加载并执行所述终端选取的所述第一JS挖矿脚本或第二JS挖矿脚本。
5.根据权利要求4所述的方法,其特征在于,所述触发访问所述目标网页的终端根据所述终端使用的浏览器所支持的语言,选取所述第一JS挖矿脚本或第二JS挖矿脚本,包括:
触发访问所述目标网页的终端判断所述终端使用的浏览器版本号是否为预设版本号集合中的任意一种;
如果判断结果为是,则确定所述终端使用的浏览器支持WebAssembly语言,从所述JS挖矿脚本库中选取所述第一JS挖矿脚本;
如果判断结果为否,则确定所述终端使用的浏览器不支持WebAssembly语言,从所述JS挖矿脚本库中选取所述第二JS挖矿脚本。
6.根据权利要求2所述的方法,其特征在于,所述将所述至少一个JS挖矿脚本的链接嵌入目标网页,包括:
生成所述第一JS挖矿脚本的链接和所述第二JS挖矿脚本的链接;
根据历史记录中所述目标网页中被支持所述WebAssembly语言的浏览器爬取各位置区域的数据信息的概率确定第二位置区域,所述第二位置区域是所述目标网页中各位置区域的数据信息被支持所述WebAssembly语言的浏览器爬取概率最大的位置区域;
根据历史记录中所述目标网页中被不支持所述WebAssembly语言的浏览器爬取各位置区域的数据信息的概率确定第三位置区域,所述第三位置区域是所述目标网页中各位置区域的数据信息被不支持所述WebAssembly语言的浏览器爬取概率最大的位置区域;
将所述第一JS挖矿脚本的链接嵌入所述目标网页的所述第二位置区域,以及将所述第二JS挖矿脚本的链接嵌入所述目标网页的所述第三位置区域。
7.根据权利要求6所述的方法,其特征在于,所述当检测到所述至少一个JS挖矿脚本的链接的启动指令时,触发访问所述目标网页的终端加载并执行所述至少一个JS挖矿脚本,包括:
当检测到所述第一JS挖矿脚本的链接的启动指令时,触发访问所述目标网页的终端判断所述终端使用的浏览器版本号是否为预设版本号集合中的任意一种;
如果判断结果为是,则确定所述终端使用的浏览器支持所述WebAssembly语言,并触发访问所述目标网页的终端使用的浏览器加载并执行所述第一JS挖矿脚本;
如果判断结果为否,则在检测到所述第二JS挖矿脚本的链接的启动指令时,触发访问所述目标网页的终端使用的浏览器加载并执行所述第二JS挖矿脚本。
该专利技术资料仅供研究查看技术是否侵权等信息,商用须获得专利权人授权。该专利全部权利属于平安科技(深圳)有限公司,未经平安科技(深圳)有限公司许可,擅自商用是侵权行为。如果您想购买此专利、获得商业授权和技术合作,请联系【客服】
本文链接:http://www.vipzhuanli.com/pat/books/201810685659.3/1.html,转载请声明来源钻瓜专利网。
- 上一篇:应用程序的运行方法和装置
- 下一篇:检测非法程序的方法和装置