[发明专利]网页错误信息处理方法、装置、计算机设备和存储介质有效
申请号: | 201710614416.6 | 申请日: | 2017-07-25 |
公开(公告)号: | CN107704484B | 公开(公告)日: | 2020-06-19 |
发明(设计)人: | 李武奇 | 申请(专利权)人: | 深圳壹账通智能科技有限公司 |
主分类号: | G06F16/958 | 分类号: | G06F16/958;G06F16/953 |
代理公司: | 广州华进联合专利商标代理有限公司 44224 | 代理人: | 谢曲曲 |
地址: | 518000 广东省深圳市*** | 国省代码: | 广东;44 |
权利要求书: | 查看更多 | 说明书: | 查看更多 |
摘要: | |||
搜索关键词: | 网页 错误 信息处理 方法 装置 计算机 设备 存储 介质 | ||
本发明涉及一种网页错误信息处理方法、装置、计算机设备和存储介质,该方法包括爬取网页中的错误信息;当标准库中不存在与错误信息相匹配的提示信息时,则将爬取的错误信息与高层滤镜库中的字符匹配得到第一匹配结果,与基础滤镜库中的字符匹配得到第二匹配结果;当第一匹配结果未完全包含第二匹配结果时,将第一匹配结果和第二匹配结果进行拼接得到目标匹配结果;根据目标匹配结果,获取爬取的错误信息的提示信息;将提示信息返回至网页。上述网页错误信息处理方法、装置、计算机设备和存储介质,当网页中存在新发错误信息时,通过高层滤镜库和基础滤镜库来确定错误信息的目标匹配结果,不需要采取线下修复,测试研发版本这一流程,节约时间。
技术领域
本发明涉及计算机领域,特别是涉及一种网页错误信息处理方法、装置、计算机设备和存储介质。
背景技术
专用爬虫解析系统,为对要爬取的页面结构有依赖,页面结构的改变或页面的替换都会导致解析或爬取失败的爬虫解析系统。对于专用爬虫解析系统,当线上出现网站改版或新型账户类型时,会出现一些新发未知页面、新发未知错误,从而会导致网络爬取系统的可用性降低且影响用户体验。传统上针对这些新发问题的处理,多采取线下修复,测试研发版本这一流程,这样耗时长。
发明内容
基于此,有必要针对网页新发错误信息的线下修复处理耗时长的问题,提供一种网页错误信息处理方法、装置、计算机设备和存储介质。
一种网页错误信息处理方法,所述方法包括:
爬取网页中的错误信息;
当标准库中不存在与所述错误信息相匹配的提示信息时,则将爬取的所述错误信息与高层滤镜库中的字符进行匹配以得到第一匹配结果;
将爬取的所述错误信息与基础滤镜库中的字符进行匹配以得到第二匹配结果;
将所述第一匹配结果与所述第二匹配结果进行比较;
当所述第一匹配结果未完全包含所述第二匹配结果时,则将第一匹配结果和所述第二匹配结果进行拼接以获得目标匹配结果;
根据所述目标匹配结果,获取爬取的所述错误信息的提示信息;
将所述提示信息返回至所述网页。
在其中一个实施例中,所述根据所述目标匹配结果,获取爬取的所述错误信息的提示信息的步骤,包括:
接收针对所述目标匹配结果的调整指令;
当所述调整指令表示确认时,则根据所述目标匹配结果,获取爬取的所述错误信息的提示信息;
当所述调整指令表示调整时,则根据所述调整指令对所述目标匹配结果进行调整,并根据调整后的所述目标匹配结果,获取爬取的所述错误信息的提示信息。
在其中一个实施例中,所述方法还包括:
将根据所述目标匹配结果获取的提示信息以及相应的所述错误信息关联存储至补充库;
所述当标准库中不存在与所述错误信息相匹配的提示信息时,则将爬取的所述错误信息与高层滤镜库中的字符进行匹配以得到第一匹配结果的步骤,包括:
当标准库中不存在与所述错误信息相匹配的提示信息时,则将爬取的所述错误信息与所述补充库中已存储的错误信息进行匹配;
当爬取的所述错误信息与所述补充库中已存储的错误信息匹配成功时,则获取匹配成功的已存储的错误信息相对应的提示信息;
将所述提示信息返回至所述网页;
当爬取的所述错误信息与所述补充库中已存储的错误信息匹配失败时,则继续将所述错误信息与高层滤镜库中的字符进行匹配以得到第一匹配结果的步骤。
该专利技术资料仅供研究查看技术是否侵权等信息,商用须获得专利权人授权。该专利全部权利属于深圳壹账通智能科技有限公司,未经深圳壹账通智能科技有限公司许可,擅自商用是侵权行为。如果您想购买此专利、获得商业授权和技术合作,请联系【客服】
本文链接:http://www.vipzhuanli.com/pat/books/201710614416.6/2.html,转载请声明来源钻瓜专利网。
- 上一篇:一种三维模型的加载方法
- 下一篇:一种职位推荐方法及计算设备