[发明专利]基于APP客户端的爬虫及爬取方法在审
申请号: | 201910102917.5 | 申请日: | 2019-01-31 |
公开(公告)号: | CN109815385A | 公开(公告)日: | 2019-05-28 |
发明(设计)人: | 龚云路 | 申请(专利权)人: | 无锡火球普惠信息科技有限公司 |
主分类号: | G06F16/951 | 分类号: | G06F16/951;G06F16/953;G06F16/9535 |
代理公司: | 无锡市汇诚永信专利代理事务所(普通合伙) 32260 | 代理人: | 王闯;葛莉华 |
地址: | 214000 江苏省无锡市震*** | 国省代码: | 江苏;32 |
权利要求书: | 查看更多 | 说明书: | 查看更多 |
摘要: | 本发明公开了基于APP客户端的爬虫及爬取方法,包括与爬虫服器匹配的爬虫sdk,爬虫sdk集成在APP客户端中,APP客户端通过与爬虫服务器端约定的特定参数来控制爬虫程序的启停,APP客户端作为子节点控制启动爬虫程序采集目标服务器数据实时返还给爬虫服务器,并由爬虫服务器解析采集的目标服务器数据,所有APP客户端都可自由地集成此爬虫sdk,这样既减轻了爬虫服务器的访问压力又可解决现有互联网爬虫技术在反爬虫技术检测下封杀IP的问题。 | ||
搜索关键词: | 爬虫 爬虫服务器 客户端 爬虫程序 爬虫技术 服务器数据 目标服务器 采集目标 控制启动 子节点 客户 启停 解析 匹配 采集 互联网 检测 自由 访问 | ||
【主权项】:
1.基于APP客户端的爬虫,其特征在于:包括与爬虫服器匹配的爬虫sdk,所述爬虫sdk集成在APP客户端中,所述APP客户端通过与爬虫服务器端约定的特定参数来控制爬虫程序的启停,所述APP客户端作为子节点控制启动爬虫程序采集目标服务器数据实时返还给爬虫服务器,并由所述爬虫服务器解析采集的目标服务器数据。
下载完整专利技术内容需要扣除积分,VIP会员可以免费下载。
该专利技术资料仅供研究查看技术是否侵权等信息,商用须获得专利权人授权。该专利全部权利属于无锡火球普惠信息科技有限公司,未经无锡火球普惠信息科技有限公司许可,擅自商用是侵权行为。如果您想购买此专利、获得商业授权和技术合作,请联系【客服】
本文链接:http://www.vipzhuanli.com/patent/201910102917.5/,转载请声明来源钻瓜专利网。