[发明专利]一种基于MapReduce的并行数据立方构建方法在审
申请号: | 201910879241.0 | 申请日: | 2019-09-18 |
公开(公告)号: | CN110597929A | 公开(公告)日: | 2019-12-20 |
发明(设计)人: | 李晓涛;朱海平;金炯华;倪明堂;黄培;张卫平;吴淑敏 | 申请(专利权)人: | 广东省智能机器人研究院 |
主分类号: | G06F16/28 | 分类号: | G06F16/28;G06F16/21;G06F16/23 |
代理公司: | 44102 广州粤高专利商标代理有限公司 | 代理人: | 罗晓林;杨桂洋 |
地址: | 523000 广东*** | 国省代码: | 广东;44 |
权利要求书: | 查看更多 | 说明书: | 查看更多 |
摘要: | 一种基于MapReduce的并行数据立方构建方法,包括以下步骤:S1,Dwarf数据立方划分,对Dwarf数据立方进行等价分割,划分成为若干个子Dwarf数据立方;S2,并行Dwarf数据立方构建,根据等价分割后的子Dwarf数据立方,进行并行的建立、查询、更新和优化操作,完成Dwarf数据立方的构建。本发明一方面结合了MapReduce框架的并行性和高可扩展性,另一方面结合了Dwarf数据立方结构的数据高压缩性及数据的自索引性,既实现了数据立方的高压缩存储、提供快速的构造、增量更新操作,又克服了MapReduce机制没有索引的劣势,实现了数据立方上的快速查询操作。 | ||
搜索关键词: | 构建 等价 并行 数据立方结构 并行数据 高压缩性 可扩展性 快速查询 优化操作 增量更新 并行性 高压缩 索引性 分割 索引 存储 查询 更新 | ||
【主权项】:
1.一种基于MapReduce的并行数据立方构建方法,包括以下步骤:/nS1,Dwarf数据立方划分,对Dwarf数据立方进行等价分割,划分成为若干个子Dwarf数据立方;/nS2,并行Dwarf数据立方构建,根据等价分割后的子Dwarf数据立方,进行并行的建立、查询、更新和优化操作,完成Dwarf数据立方的构建。/n
下载完整专利技术内容需要扣除积分,VIP会员可以免费下载。
该专利技术资料仅供研究查看技术是否侵权等信息,商用须获得专利权人授权。该专利全部权利属于广东省智能机器人研究院,未经广东省智能机器人研究院许可,擅自商用是侵权行为。如果您想购买此专利、获得商业授权和技术合作,请联系【客服】
本文链接:http://www.vipzhuanli.com/patent/201910879241.0/,转载请声明来源钻瓜专利网。