[发明专利]重复数据处理方法、装置及系统有效
申请号: | 201110164850.1 | 申请日: | 2011-06-17 |
公开(公告)号: | CN102831127A | 公开(公告)日: | 2012-12-19 |
发明(设计)人: | 何一昕;叶瑞海;吴协尧;张文波 | 申请(专利权)人: | 阿里巴巴集团控股有限公司 |
主分类号: | G06F17/30 | 分类号: | G06F17/30 |
代理公司: | 北京康信知识产权代理有限责任公司 11240 | 代理人: | 吴贵明;韩建伟 |
地址: | 英属开曼群岛大开*** | 国省代码: | 开曼群岛;KY |
权利要求书: | 查看更多 | 说明书: | 查看更多 |
摘要: | 本申请公开了一种重复数据处理方法、装置及系统,该方法包括:将待比较数据的数据结构处理成与重复数据库中的数据的数据结构相同,其中,重复数据库是将数据库中的数据按照预设的数据结构进行处理后通过内存映射形成的;将处理之后的待比较数据与重复数据库中的数据进行比较,确定待比较数据是否是重复数据。通过本申请提高了服务器进行去重处理时的效率,节约了服务器资源。 | ||
搜索关键词: | 重复 数据处理 方法 装置 系统 | ||
【主权项】:
一种重复数据处理方法,其特征在于包括以下步骤:将待比较数据的数据结构处理成与重复数据库中的数据的数据结构相同,其中,所述重复数据库是将数据库中的数据按照预设的数据结构进行处理后通过内存映射形成的;将处理之后的所述待比较数据与所述重复数据库中的数据进行比较,确定所述待比较数据是否为重复数据;在所述待比较数据不是重复数据的情况下,将所述待比较数据写入所述数据库。
下载完整专利技术内容需要扣除积分,VIP会员可以免费下载。
该专利技术资料仅供研究查看技术是否侵权等信息,商用须获得专利权人授权。该专利全部权利属于阿里巴巴集团控股有限公司,未经阿里巴巴集团控股有限公司许可,擅自商用是侵权行为。如果您想购买此专利、获得商业授权和技术合作,请联系【客服】
本文链接:http://www.vipzhuanli.com/patent/201110164850.1/,转载请声明来源钻瓜专利网。