[发明专利]基于SIMD优化的网页去重并行方法无效
| 申请号： | 201110021002.5 | 申请日： | 2011-01-18 |
| 公开（公告）号： | CN102024065A | 公开（公告）日： | 2011-04-20 |
| 发明（设计）人： | 龙军;张祖平;袁鑫攀;罗跃逸 | 申请（专利权）人： | 中南大学 |
| 主分类号： | G06F17/30 | 分类号： | G06F17/30;G06F17/27 |
| 代理公司： | 长沙市融智专利事务所 43114 | 代理人： | 黄美成 |
| 地址： | 410083 湖南*** | 国省代码： | 湖南;43 |
| 权利要求书： | 查看更多 | 说明书： | 查看更多 |
| 摘要： | 本发明公开了一种基于SIMD优化的网页去重并行方法，包括以下步骤：步骤1：网页文本信息提取步骤：该过程用于将网页有效信息提取出来；步骤2：Shingle提取步骤：该过程用于提取网页特征，并生成Shingles集合；步骤3：聚类步骤：该过程用于降低比对次数，减小时间和空间复杂度；步骤4：指纹比对步骤：该过程用于寻找出相似网页，将相似的网页剔除。该基于SIMD优化的网页去重并行方法能在保证查准率和查全率的同时，有效地提高网页相似度检测的速率。 | ||
| 搜索关键词： | 基于 simd 优化 网页 并行 方法 | ||
【主权项】：
一种基于SIMD优化的网页去重并行方法，其特征在于，包括以下步骤：步骤1：网页文本信息提取步骤：该过程用于将网页有效信息提取出来；步骤2：Shingle提取步骤：该过程用于提取网页特征，并生成Shingles集合；步骤3：聚类步骤：该过程用于降低比对次数，减小时间和空间复杂度；步骤4：指纹比对步骤：该过程用于寻找出相似网页，将相似的网页剔除。
下载完整专利技术内容需要扣除积分，VIP会员可以免费下载。
该专利技术资料仅供研究查看技术是否侵权等信息，商用须获得专利权人授权。该专利全部权利属于中南大学，未经中南大学许可，擅自商用是侵权行为。如果您想购买此专利、获得商业授权和技术合作，请联系【客服】
本文链接：http://www.vipzhuanli.com/patent/201110021002.5/，转载请声明来源钻瓜专利网。
- 上一篇：一种静电放电保护装置
- 下一篇：一种薄板防焊方法
