[发明专利]网页抓取方法及装置有效
申请号: | 201611121344.3 | 申请日: | 2016-12-08 |
公开(公告)号: | CN108197125B | 公开(公告)日: | 2020-10-09 |
发明(设计)人: | 程志峰;邱柏宇 | 申请(专利权)人: | 腾讯科技(深圳)有限公司 |
主分类号: | G06F16/951 | 分类号: | G06F16/951;G06F16/955;A63F13/35;A63F13/60;A63F13/77 |
代理公司: | 北京三高永信知识产权代理有限责任公司 11138 | 代理人: | 朱雅男 |
地址: | 518057 广东省深圳*** | 国省代码: | 广东;44 |
权利要求书: | 查看更多 | 说明书: | 查看更多 |
摘要: | 本发明公开了一种网页抓取方法及装置,属于计算机网络领域。所述方法包括:抓取游戏网站上的目标网页页面;根据目标网页页面的网页源代码,识别H5游戏对应的网页页面;对H5游戏对应的网页页面进行动态渲染,得到渲染后的网页页面;渲染后的网页页面中提取H5游戏对应的游戏详情信息。本发明通过网页源代码识别出H5游戏对应的网页页面,使得服务器能够从渲染后的该网页页面中提取出H5游戏对应的游戏详情信息,避免了抓取结果需要大量人工来筛选和信息提取的问题,达到了根据网页的源代码准确识别H5游戏对应的网页页面,进行从网页页面中提取游戏详情信息,从而提高提取过程的效率和准确率的效果。 | ||
搜索关键词: | 网页 抓取 方法 装置 | ||
【主权项】:
1.一种网页抓取方法,其特征在于,所述方法包括:抓取游戏网站上的目标网页页面;根据所述目标网页页面的网页源代码,识别H5游戏对应的网页页面;对所述H5游戏对应的网页页面进行动态渲染,得到渲染后的网页页面;从所述渲染后的网页页面中提取所述H5游戏对应的游戏详情信息;其中,所述游戏详情信息包括游戏名、游戏图标、游戏运行图片、游戏详情、游戏运行地址、游戏类型中的至少一种。
下载完整专利技术内容需要扣除积分,VIP会员可以免费下载。
该专利技术资料仅供研究查看技术是否侵权等信息,商用须获得专利权人授权。该专利全部权利属于腾讯科技(深圳)有限公司,未经腾讯科技(深圳)有限公司许可,擅自商用是侵权行为。如果您想购买此专利、获得商业授权和技术合作,请联系【客服】
本文链接:http://www.vipzhuanli.com/patent/201611121344.3/,转载请声明来源钻瓜专利网。