[发明专利]对用于分布式抓取的搜索空间进行分区的方法和装置有效
申请号: | 201310435241.4 | 申请日: | 2013-09-23 |
公开(公告)号: | CN103678471A | 公开(公告)日: | 2014-03-26 |
发明(设计)人: | G-V·茹尔当;G·冯博赫曼;S·M·M·塔赫利;I·V·奥努 | 申请(专利权)人: | 国际商业机器公司 |
主分类号: | G06F17/30 | 分类号: | G06F17/30 |
代理公司: | 北京市中咨律师事务所 11247 | 代理人: | 于静;张亚非 |
地址: | 美国*** | 国省代码: | 美国;US |
权利要求书: | 查看更多 | 说明书: | 查看更多 |
摘要: | 本发明涉及一种对用于分布式抓取的搜索空间进行分区的方法和装置。用于对抓取空间进行分区的计算机实现的过程的一个示例性实施例包括:计算事件集合中的每个事件的事件标识符以形成标识后的事件集合;将所述标识后的事件集合划分成多个分区;为节点集合中的每个节点分配一个分区;以及由相应节点执行每个分配的分区中的每个事件。响应于判定发现新状态,向其它节点通知所述新状态,其中将与所述新状态关联的信息添加到每个节点处的相应分配的事件ID集合。响应于判定不存在更多通知,所述计算机实现的过程判定是否存在更多待处理事件,以及响应于判定不存在更多待处理事件,所述计算机实现的过程终止。 | ||
搜索关键词: | 用于 分布式 抓取 搜索 空间 进行 分区 方法 装置 | ||
【主权项】:
一种用于对抓取空间进行分区的计算机实现的过程,所述计算机实现的过程包括:计算事件集合中的每个事件的事件标识符以形成标识后的事件集合;将所述标识后的事件集合划分成多个分区;为节点集合中的每个节点分配一个分区;由相应节点执行每个分配的分区中的每个事件;判定是否发现新状态;响应于判定发现新状态,向其它节点通知所述新状态;将与所述新状态关联的信息添加到每个节点处的相应分配的事件ID集合;判定是否存在更多通知;响应于判定不存在更多通知,判定是否存在更多待处理事件;以及响应于判定不存在更多待处理事件而终止。
下载完整专利技术内容需要扣除积分,VIP会员可以免费下载。
该专利技术资料仅供研究查看技术是否侵权等信息,商用须获得专利权人授权。该专利全部权利属于国际商业机器公司,未经国际商业机器公司许可,擅自商用是侵权行为。如果您想购买此专利、获得商业授权和技术合作,请联系【客服】
本文链接:http://www.vipzhuanli.com/patent/201310435241.4/,转载请声明来源钻瓜专利网。
- 上一篇:一种水果粥及其制备方法
- 下一篇:一种去除蔬菜水果中农药残留的方法