[发明专利]一种异常链接处理方法、装置、计算机设备和存储介质在审
申请号: | 202111242832.0 | 申请日: | 2021-10-25 |
公开(公告)号: | CN114329287A | 公开(公告)日: | 2022-04-12 |
发明(设计)人: | 唐亚腾;谢锦汉;钟滨;徐进 | 申请(专利权)人: | 腾讯科技(深圳)有限公司 |
主分类号: | G06F16/958 | 分类号: | G06F16/958 |
代理公司: | 深圳翼盛智成知识产权事务所(普通合伙) 44300 | 代理人: | 李玉婷 |
地址: | 518057 广东省深圳*** | 国省代码: | 广东;44 |
权利要求书: | 查看更多 | 说明书: | 查看更多 |
摘要: | |||
搜索关键词: | 一种 异常 链接 处理 方法 装置 计算机 设备 存储 介质 | ||
1.一种异常链接处理方法,其特征在于,包括:
获取待检测的搜索链接;
基于所述搜索链接进行内容搜索,得到所述搜索链接对应的网页结构;
对所述网页结构进行解析,得到所述搜索链接在至少一个内容维度上的描述信息;
针对每个内容维度的描述信息,采用对应的异常链接检测策略对所述搜索链接进行异常检测,得到每个内容维度的异常检测结果;
基于所述异常检测结果对所述搜索链接进行封禁处理。
2.根据权利要求1所述的方法,其特征在于,所述至少一个内容维度上的描述信息包括原始网页内容;所述针对每个内容维度的描述信息,采用对应的异常链接检测策略对所述搜索链接进行异常检测,得到每个内容维度的异常检测结果,包括:
对所述原始网页内容进行过滤内容检测;
当所述原始网页内容不包括预设过滤内容时,对所述原始网页内容进行解析,得到所述原始网页内容中的主体内容;
对所述主体内容进行内容检测,得到所述异常检测结果。
3.根据权利要求2所述的方法,其特征在于,所述对所述主体内容进行内容检测,得到所述异常检测结果,包括:
对所述主体内容进行文本检测;
当检测到所述主体内容包括文本内容时,对所述文本内容进行异常关键词检测,得到所述异常检测结果。
4.根据权利要求3所述的方法,其特征在于,所述对所述文本内容进行异常关键词检测,得到所述异常检测结果,包括:
对所述文本内容进行分词处理,得到至少一个文本子词;
将所述文本子词和预设异常关键词进行匹配,得到关键词匹配结果;
基于所述关键词匹配结果生成所述异常检测结果。
5.根据权利要求4所述的方法,其特征在于,所述基于所述关键词匹配结果生成所述异常检测结果,包括:
当所述文本子词和所述预设异常关键词不相匹配时,对所述文本内容进行语义提取,得到所述文本内容的语义特征;
对所述语义特征分别进行前向编码和后向编码,得到前向编码对应的前向编码信息和后向编码对应的后向编码信息;
将所述前向编码信息和所述后向编码信息进行融合,得到融合后编码信息;
基于所述融合后编码信息计算搜索链接的异常概率,得到所述异常检测结果。
6.根据权利要求4所述的方法,其特征在于,所述将所述文本子词和预设异常关键词进行匹配之前,包括:
获取初始异常关键词;
对所述初始异常关键词进行扩充处理,得到扩充后异常关键词;
基于所述扩充后异常关键词进行异常链接搜索,得到异常链接搜索结果;
基于所述异常链接搜索结果从所述扩充后异常关键词中筛选出所述预设异常关键词。
7.根据权利要求3所述的方法,其特征在于,所述方法还包括:
当检测到所述主体内容不包括文本内容时,对所述主体内容进行图像检测;
当检测到所述主体内容包括图像内容时,对所述图像内容进行字符识别;
当识别到图像内容的字符信息时,对所述字符信息进行异常字符检测,得到所述异常检测结果。
8.根据权利要求7所述的方法,其特征在于,所述方法还包括:
当检测到所述主体内容不包括图像内容时,对原始网页内容进行聚类处理,得到原始网页内容对应的目标簇;
计算所述目标簇中对象之间的相似度;
基于所述相似度判断所述搜索链接是否是异常链接。
该专利技术资料仅供研究查看技术是否侵权等信息,商用须获得专利权人授权。该专利全部权利属于腾讯科技(深圳)有限公司,未经腾讯科技(深圳)有限公司许可,擅自商用是侵权行为。如果您想购买此专利、获得商业授权和技术合作,请联系【客服】
本文链接:http://www.vipzhuanli.com/pat/books/202111242832.0/1.html,转载请声明来源钻瓜专利网。