[发明专利]基于网络爬虫的漏洞扫描方法、装置、设备和存储介质在审
申请号: | 202011396260.7 | 申请日: | 2020-12-03 |
公开(公告)号: | CN112507341A | 公开(公告)日: | 2021-03-16 |
发明(设计)人: | 刘伟雄;李泳权 | 申请(专利权)人: | 广州万方计算机科技有限公司 |
主分类号: | G06F21/57 | 分类号: | G06F21/57;G06F16/951;G06F16/955 |
代理公司: | 北京泽方誉航专利代理事务所(普通合伙) 11884 | 代理人: | 陈照辉 |
地址: | 510000 广东省广*** | 国省代码: | 广东;44 |
权利要求书: | 查看更多 | 说明书: | 查看更多 |
摘要: | 本申请实施例公开了一种基于网络爬虫的漏洞扫描方法、装置、设备和存储介质。该方法包括:根据预设的待爬取列表获取对应的待爬取网页以及所述待爬取网页的有效URL;对所述有效URL进行排序过滤,并更新当前爬虫深度;将含有预设关键字的有效URL转换为标准URL;在预设的爬取集合对所述标准URL进行查重,根据查重的结果对所述爬取集合进行更新;当所述待爬取列表为空或爬虫深度超过预设的深度极限值,终止爬虫扫描。通过宽度优先可以尽可能多地覆盖网页,同时通过深度极限值控制爬虫对一条路径的爬取过于深入,实现了爬取深度和爬取宽度的较好平衡,在提高爬取速度的同时保证合适的爬取宽度。 | ||
搜索关键词: | 基于 网络 爬虫 漏洞 扫描 方法 装置 设备 存储 介质 | ||
【主权项】:
暂无信息
下载完整专利技术内容需要扣除积分,VIP会员可以免费下载。
该专利技术资料仅供研究查看技术是否侵权等信息,商用须获得专利权人授权。该专利全部权利属于广州万方计算机科技有限公司,未经广州万方计算机科技有限公司许可,擅自商用是侵权行为。如果您想购买此专利、获得商业授权和技术合作,请联系【客服】
本文链接:http://www.vipzhuanli.com/patent/202011396260.7/,转载请声明来源钻瓜专利网。