[发明专利]一种基于科技资源大数据的存储方法有效
申请号: | 201610429012.5 | 申请日: | 2016-06-16 |
公开(公告)号: | CN106126553B | 公开(公告)日: | 2020-02-14 |
发明(设计)人: | 吴明强;李庆;徐冲;尹政 | 申请(专利权)人: | 西安科技大市场有限公司 |
主分类号: | G06F16/22 | 分类号: | G06F16/22 |
代理公司: | 61211 西安智邦专利商标代理有限公司 | 代理人: | 胡乐;张倩 |
地址: | 710065 陕西省*** | 国省代码: | 陕西;61 |
权利要求书: | 查看更多 | 说明书: | 查看更多 |
摘要: | 本发明提出一种基于科技资源大数据的存储方法,在不增加表结构的情况下,能够存储大量异构数据,并简便快速实现多备份,且能够提高数据查询效率。该存储方法是在系统的存储空间建立Hbase表和mysql表,用mysql表作为Hbase表的索引,并按照用户信息、数据类型将Hbase表划分成不同的存储区域,再依次存储所接收数据包中的每一条数据;其中,分别根据第一条数据和最后一条数据的用户信息、数据类型和随机码生成起始存储地址和终止存储地址,并放入mysql表中;所述起始存储地址和终止存储地址组成该数据包的索引信息。本发明在不增加表结构的情况下,能够存储大量异构数据。 | ||
搜索关键词: | 一种 基于 科技 资源 数据 存储 方法 | ||
【主权项】:
1.一种基于科技资源大数据的存储方法,其特征在于,包括以下步骤:/n1)在系统的存储空间建立Hbase表和mysql表,用mysql表作为Hbase表的索引,并按照用户信息、数据类型将Hbase表划分成不同的存储区域;/n2)依次存储所接收数据包中的每一条数据/n2.1)从第一条数据中提取用户信息和数据类型,同时获取系统提供的随机码和当前时间戳,根据用户信息、数据类型、当前时间戳和随机码生成起始存储地址,并将这些信息存储在Hbase表中对应位置,同时将所述起始存储地址放入mysql表中;/n2.2)依次从此后的每一条数据中提取用户信息和数据类型,同时获取系统提供的随机码和当前时间戳;在Hbase表中已存的第一条数据后依次连续存储各条数据;其中,根据最后一条数据的用户信息、数据类型、当前时间戳和随机码生成终止存储地址,同时将所述终止存储地址放入mysql表中;/n所述起始存储地址和终止存储地址组成该数据包的索引信息。/n
下载完整专利技术内容需要扣除积分,VIP会员可以免费下载。
该专利技术资料仅供研究查看技术是否侵权等信息,商用须获得专利权人授权。该专利全部权利属于西安科技大市场有限公司,未经西安科技大市场有限公司许可,擅自商用是侵权行为。如果您想购买此专利、获得商业授权和技术合作,请联系【客服】
本文链接:http://www.vipzhuanli.com/patent/201610429012.5/,转载请声明来源钻瓜专利网。
- 数据显示系统、数据中继设备、数据中继方法、数据系统、接收设备和数据读取方法
- 数据记录方法、数据记录装置、数据记录媒体、数据重播方法和数据重播装置
- 数据发送方法、数据发送系统、数据发送装置以及数据结构
- 数据显示系统、数据中继设备、数据中继方法及数据系统
- 数据嵌入装置、数据嵌入方法、数据提取装置及数据提取方法
- 数据管理装置、数据编辑装置、数据阅览装置、数据管理方法、数据编辑方法以及数据阅览方法
- 数据发送和数据接收设备、数据发送和数据接收方法
- 数据发送装置、数据接收装置、数据收发系统、数据发送方法、数据接收方法和数据收发方法
- 数据发送方法、数据再现方法、数据发送装置及数据再现装置
- 数据发送方法、数据再现方法、数据发送装置及数据再现装置