[发明专利]基于多层决策的Web地标可靠性评估方法及装置

说明书

本发明属于网络安全应用技术领域，特别涉及一种基于多层决策的Web地标可靠性评估方法及装置，该方法包含：解析候选地标中IP地址；针对解析后的候选地标，利用过滤器对候选地标进行过滤，删除无效数据；对过滤后的候选地标进行评估，获取其可信度数值。本发明在不依赖路径探测的前提下，充分利用互联网公开服务，对不同特征的无效Web地标进行分类过滤、量化评估地标的可信度，实现大规模Web地标的自动化评估，解决当前方法准确率低、效率不高、大规模Web地标的自动量化运行等问题；实现无效地标的过滤和有效地标的可信度量化评估，且有效提高地标获取的准确性和定位结果的精确度，对网络服务器类实体地标精确获取技术具有重要指导意义。

技术领域

本发明属于网络安全应用技术领域，特别涉及一种基于多层决策的Web地标可靠性评估方法及装置。

背景技术

网络实体定位技术，即IP定位技术，是通过IP地址来确定网络实体地理位置的一种技术，该技术在定向广告投放、基于地域的内容定制、网络性能优化等方面得到广泛的应用。基于地标的定位技术以其较高的精确度和可靠性得到了广泛的运用，大量高密度、高精度的网络地标成了IP定位的关键基础支撑，同时地标的稳定性也直接影响着IP定位的效果。遍布世界的Web服务器，分布广泛，数量规模大，其IP地址与地理位置关系相对固定，是网络地标的理想选择，简称此类地标为“Web地标”。现有Web地标挖掘方法将获取到的Web网站所属组织机构的地理位置作为地标的地理位置，然而由于主机托管、共享主机、CND网络的大量存在，特别是近年来云服务的飞速发展，导致Web地标提供的地理位置未必为Web服务器的真实位置，无法为IP定位提供有效支撑。因此需要采取有效的算法对Web地标的地理位置信息的可靠性进行评估。

目前用于Web评估的方法主要有：基于主页重定向的方法，简称为LVM，该方法通过主页重定向和邮区信息对照的方式过滤CDN网络和共享主机，可过滤部分无效地标，但不重定向并非一定就是可信地标，且很多网站不支持IP地址访问，导致该方法获取的Web地标准确率不高，且因对每个地标需进行两次网页访问并进行是否重定向判断导致评估速度慢，不适合于大规模地标评估；基于最近共同路由器的街道级地标评估方法，简称为SLE，该方法将地标按照接入路由分组，根据组内地标是否符合网络时延和地理距离的约束关系进行可信度估计，大幅提升了地标的准确性，但是该方法要求对地标的探测可达、接入路由器不匿名且需要反复测量路径和时延，无法自动化运行，不适用于大规模地标评估。

发明内容

为此，本发明提供一种基于多层决策的Web地标可靠性评估方法及装置，解决当前获取地标准确率低、效率不高、无法自动化运行等问题。

按照本发明所提供的设计方案，一种基于多层决策的Web地标可靠性评估方法，包含如下内容：

解析候选地标中IP地址；

针对解析后的候选地标，利用过滤器对候选地标进行过滤，删除无效数据；

对过滤后的候选地标进行评估，获取其可信度数值。

上述的，候选地标解析过程中，包含如下步骤：

将候选地标按照域名进行分组，删除不规范数据，该不规范数据包含不提供域名及域名不合格的候选地标；

进行DNS全息解析，使用多个分布在全球的DNS服务器对域名分别进行DNS查询，合并各DNS服务器返回记录信息，生成域名映射的IP地址列表；

针对域名映射的该IP地址列表，如果该域名仅包含一个IP地址，则将该IP地址赋予该域名对应的候选地标；如果该域名包含n个IP地址，则将该域名对应的候选地标复制n份，每份中被赋予该IP地址列表中一个IP地址，其中，n为大于1的整数。

上述的，针对解析后的候选地标，利用过滤器对候选地标进行过滤的过程，包含如下内容：