[发明专利]一种应用爬取方法及系统在审
申请号: | 201710120705.0 | 申请日: | 2017-03-02 |
公开(公告)号: | CN106886602A | 公开(公告)日: | 2017-06-23 |
发明(设计)人: | 雷建朝 | 申请(专利权)人: | 上海斐讯数据通信技术有限公司 |
主分类号: | G06F17/30 | 分类号: | G06F17/30 |
代理公司: | 杭州千克知识产权代理有限公司33246 | 代理人: | 周希良,吴辉辉 |
地址: | 201616 *** | 国省代码: | 上海;31 |
权利要求书: | 查看更多 | 说明书: | 查看更多 |
摘要: | 本发明涉及数据信息检索技术领域,具体为一种应用爬取方法及系统。一种应用爬取方法,包括以下步骤,1)获取应用的包名;2)将所述应用的包名通过布隆过滤器处理生成一爬取数组;3)对所述应用进行爬取并保存所述爬取数组。在对所述应用进行爬取之前,还包括利用所述爬取数组与已存储在应用爬取系统中的爬取数组做比较,判断所述应用是否已爬取;若所述应用未爬取,对所述应用进行爬取,并将所述爬取数组存储在所述应用爬取系统中。本发明通过布隆过滤器对应用进行过滤以保证在重复量不高的情况下爬取一个全量的应用,并通过白名单相似度进行对比,降低了应用爬取的错误率。 | ||
搜索关键词: | 一种 应用 方法 系统 | ||
【主权项】:
一种爬取应用方法,应用于应用爬取系统中,其特征在于:包括以下步骤,1)获取应用的包名;2)将所述应用的包名通过布隆过滤器处理生成一爬取数组;3)利用所述爬取数组与已存储在应用爬取系统中的爬取数组做比较,判断所述应用是否已爬取;若所述应用未爬取,对所述应用进行爬取,并将所述爬取数组存储在所述应用爬取系统中。
下载完整专利技术内容需要扣除积分,VIP会员可以免费下载。
该专利技术资料仅供研究查看技术是否侵权等信息,商用须获得专利权人授权。该专利全部权利属于上海斐讯数据通信技术有限公司,未经上海斐讯数据通信技术有限公司许可,擅自商用是侵权行为。如果您想购买此专利、获得商业授权和技术合作,请联系【客服】
本文链接:http://www.vipzhuanli.com/patent/201710120705.0/,转载请声明来源钻瓜专利网。