[发明专利]一种数据处理方法及装置有效
申请号: | 201210517564.3 | 申请日: | 2012-12-05 |
公开(公告)号: | CN103020203B | 公开(公告)日: | 2017-04-12 |
发明(设计)人: | 齐路;何锐邦;唐会军 | 申请(专利权)人: | 北京奇虎科技有限公司;奇智软件(北京)有限公司 |
主分类号: | G06F17/30 | 分类号: | G06F17/30 |
代理公司: | 北京智汇东方知识产权代理事务所(普通合伙)11391 | 代理人: | 康正德,范晓斌 |
地址: | 100088 北京市西城区新*** | 国省代码: | 北京;11 |
权利要求书: | 查看更多 | 说明书: | 查看更多 |
摘要: | 本发明公开了一种数据处理方法和装置,所述装置包括分组模块,配置为对输入的数据进行分组,其中,所述数据的组数根据处理该数据的结点数确定;处理模块,配置为依次为每个结点分配一组待处理的数据,并利用各结点对各自对应的数据进行并行的连续id化处理,其中,所述连续id化处理是指将数据中的关键字替换为0‑N的整数;存储模块,配置为存储经连续id化处理后的数据;其中,所述处理模块还配置为对于任意一个结点,计算本结点起始id编号;根据本结点起始id编号对本结点数据进行id化。采用本发明能够实现数据并行id化处理,节省存储时间。 | ||
搜索关键词: | 一种 数据处理 方法 装置 | ||
【主权项】:
一种数据处理方法,包括:对输入的数据进行分组,所述输入的数据为key‑value对,其中,所述数据的组数根据处理该数据的结点数确定;依次为每个结点分配一组待处理的数据,并利用各结点对各自对应的数据进行并行的连续id化处理,其中,所述连续id化处理是指将数据中的关键字替换为0‑N的整数,替换后的所有数据的关键字是连续的;存储经连续id化处理后的数据;其中,所述利用各结点对各自对应的组数据进行并行的连续id化处理,包括:对于任意一个结点,计算本结点数据的起始id编号;根据本结点数据的起始id编号对本结点数据进行id化。
下载完整专利技术内容需要扣除积分,VIP会员可以免费下载。
该专利技术资料仅供研究查看技术是否侵权等信息,商用须获得专利权人授权。该专利全部权利属于北京奇虎科技有限公司;奇智软件(北京)有限公司,未经北京奇虎科技有限公司;奇智软件(北京)有限公司许可,擅自商用是侵权行为。如果您想购买此专利、获得商业授权和技术合作,请联系【客服】
本文链接:http://www.vipzhuanli.com/patent/201210517564.3/,转载请声明来源钻瓜专利网。
- 上一篇:区域影响分析系统及其分析方法
- 下一篇:二级减速后驱动桥总成