[发明专利]一种基于页面元素选取的交互式网络爬虫创建方法及系统在审
申请号: | 201710862631.8 | 申请日: | 2017-09-15 |
公开(公告)号: | CN107609150A | 公开(公告)日: | 2018-01-19 |
发明(设计)人: | 罗亮 | 申请(专利权)人: | 湖北省楚天云有限公司 |
主分类号: | G06F17/30 | 分类号: | G06F17/30 |
代理公司: | 北京国帆知识产权代理事务所(普通合伙)11334 | 代理人: | 李增朝 |
地址: | 430000 湖北省武汉市东湖开发区花城大*** | 国省代码: | 湖北;42 |
权利要求书: | 查看更多 | 说明书: | 查看更多 |
摘要: | 本申请公开了一种基于页面元素选取的交互式网络爬虫创建方法以及系统;其中的方法主要包括获取待访问页面,并通过浏览器显示所述待访问页面,其中,所述通过浏览器显示的待访问页面中的页面元素设置有用于选取页面元素的事件处理响应函数;基于所述事件处理响应函数确定用户基于所述显示的待访问页面而选取的页面元素,并获取基于所述页面元素的爬取定位信息;将包含有爬取定位信息的待爬取记录添加在爬取任务集合中;根据所述爬取任务集合中的待爬取记录创建网络爬虫实例;其中,所述网络爬虫实例用于爬取所述爬取定位信息对应的网络数据。 | ||
搜索关键词: | 一种 基于 页面 元素 选取 交互式 网络 爬虫 创建 方法 系统 | ||
【主权项】:
一种基于页面元素选取的交互式网络爬虫创建方法,其特征在于,该方法包括:获取待访问页面,并通过浏览器显示所述待访问页面,其中,所述通过浏览器显示的待访问页面中的页面元素设置有用于选取页面元素的事件处理响应函数;基于所述事件处理响应函数确定用户基于所述显示的待访问页面而选取的页面元素,并获取基于所述页面元素的爬取定位信息;将包含有爬取定位信息的待爬取记录添加在爬取任务集合中;根据所述爬取任务集合中的待爬取记录创建网络爬虫实例;其中,所述网络爬虫实例用于爬取所述爬取定位信息对应的网络数据。
下载完整专利技术内容需要扣除积分,VIP会员可以免费下载。
该专利技术资料仅供研究查看技术是否侵权等信息,商用须获得专利权人授权。该专利全部权利属于湖北省楚天云有限公司,未经湖北省楚天云有限公司许可,擅自商用是侵权行为。如果您想购买此专利、获得商业授权和技术合作,请联系【客服】
本文链接:http://www.vipzhuanli.com/patent/201710862631.8/,转载请声明来源钻瓜专利网。