[发明专利]一种无需人工参与的历史数据追溯爬取方法及终端有效
申请号: | 202110147690.3 | 申请日: | 2019-03-14 |
公开(公告)号: | CN112905866B | 公开(公告)日: | 2022-06-07 |
发明(设计)人: | 刘德建;林琛 | 申请(专利权)人: | 福建省天奕网络科技有限公司 |
主分类号: | G06F16/951 | 分类号: | G06F16/951;G06F16/955 |
代理公司: | 福州市博深专利事务所(普通合伙) 35214 | 代理人: | 唐燕玲 |
地址: | 350212 福*** | 国省代码: | 福建;35 |
权利要求书: | 查看更多 | 说明书: | 查看更多 |
摘要: | 本发明提供了无需人工参与的历史数据追溯爬取及终端,其方法包括以下步骤:S1:设定历史数据追溯方向,以及每一次爬取历史数据量对应的第一阈值;S2:根据历史数据追溯方向以及第一阈值,获取待多次爬取的历史数据分别对应的多个第一URL;将多个第一URL进行排序,得到第一序列;S3:每隔预设时间依次爬取第一序列中的每一个第一URL对应网页上的数据。本发明提供了一种无需人工参与的历史数据追溯爬取方法及终端,在追溯爬取历史数据的过程中无需人工参与,能够提高历史数据爬取的效率。 | ||
搜索关键词: | 一种 无需 人工 参与 历史数据 追溯 方法 终端 | ||
【主权项】:
暂无信息
下载完整专利技术内容需要扣除积分,VIP会员可以免费下载。
该专利技术资料仅供研究查看技术是否侵权等信息,商用须获得专利权人授权。该专利全部权利属于福建省天奕网络科技有限公司,未经福建省天奕网络科技有限公司许可,擅自商用是侵权行为。如果您想购买此专利、获得商业授权和技术合作,请联系【客服】
本文链接:http://www.vipzhuanli.com/patent/202110147690.3/,转载请声明来源钻瓜专利网。
- 上一篇:一种海上风电桩安装装置
- 下一篇:一种涂料分散剂的制备方法以及涂料分散剂