[发明专利]一种数据索引构建方法、装置、电子设备及存储介质有效
申请号: | 202110609042.5 | 申请日: | 2021-06-01 |
公开(公告)号: | CN113254451B | 公开(公告)日: | 2022-04-19 |
发明(设计)人: | 胡广银 | 申请(专利权)人: | 北京城市网邻信息技术有限公司 |
主分类号: | G06F16/22 | 分类号: | G06F16/22;G06F16/2455 |
代理公司: | 北京润泽恒知识产权代理有限公司 11319 | 代理人: | 吕俊秀 |
地址: | 100015 北京市朝阳区酒仙桥*** | 国省代码: | 北京;11 |
权利要求书: | 查看更多 | 说明书: | 查看更多 |
摘要: | |||
搜索关键词: | 一种 数据 索引 构建 方法 装置 电子设备 存储 介质 | ||
本发明提供了一种数据索引构建方法、装置、电子设备及存储介质。所述方法,包括:针对每个数据对象,获取每个所述数据对象的有效时间段和索引相关信息,所述索引相关信息至少包含所述数据对象的身份标识;基于每个所述数据对象的索引相关信息,以及各个数据对象的有效时间段之间的占用关系,构建时间序列索引树;其中,所述时间序列索引树包括二叉查找树、平衡二叉树、B+树中的任意一种,所述时间序列索引树中每个节点为一个时间段,且作为节点的各个时间段互不重叠,每个所述数据对象的有效时间段对应于至少一个节点。
技术领域
本发明涉及计算机技术领域,尤其涉及一种数据索引构建方法、装置、电子设备及存储介质。
背景技术
随着计算机技术的快速发展,通过索引技术进行数据的存储和读取的应用范围越来越广。业界关于库存的实现主要依赖于数据库和ElasticSearch(一个基于Lucene的搜索服务器)的实现。
传统的RDBMS(Relational Database Management System,关系数据库管理系统)在商品聚合搜索场景中往往需要搜索出很多的商品订单数据用于聚合出商品的消耗库存数据,而库存系统相对来说一个写少读多的系统,聚合大量的数据可以来说非常影响搜索的性能。而TSDB(Time Series Database,时间序列数据库)由于底层采用的是LSM(Log-Structured-Merge,日志结构合并)树,适合写多读少的场景,不太适合进行实时搜索的读多写少的应用场景。ES(Elasticsearch),弹性搜索(例如分布式搜索和数据分析引擎)是基于Luence实现的倒排索引。Lucene在查询过程中是基于Segment (段),但是索引过程的文档不会被立即合并到可供查询的Segment上,这对于库存检索的实时性有一定的阻碍。
由上述分析可知,上述索引技术很难实现时间序列搜索的高性能和实时性。
发明内容
本发明实施例提供一种数据索引构建方法、装置、电子设备及存储介质,以解决相关技术方案中很难实现时间序列搜索的高性能和实时性的技术问题。
为了解决上述技术问题,本发明是这样实现的:
第一方面,本发明实施例提供了一种数据索引构建方法,包括:
针对每个数据对象,获取每个所述数据对象的有效时间段和索引相关信息,所述索引相关信息至少包含所述数据对象的身份标识;
基于每个所述数据对象的索引相关信息,以及各个数据对象的有效时间段之间的占用关系,构建时间序列索引树;
其中,所述时间序列索引树包括二叉查找树、平衡二叉树、B+树中的任意一种,所述时间序列索引树中每个节点为一个时间段,且作为节点的各个时间段互不重叠,每个所述数据对象的有效时间段对应于至少一个节点。
第二方面,本发明实施例提供了一种数据索引构建装置,包括:
基础数据获取模块,用于针对每个数据对象,获取每个所述数据对象的有效时间段和索引相关信息,所述索引相关信息至少包含所述数据对象的身份标识;
TSI树构建模块,用于基于每个所述数据对象的索引相关信息,以及各个数据对象的有效时间段之间的占用关系,构建时间序列索引树;
其中,所述时间序列索引树包括二叉查找树、平衡二叉树、B+树中的任意一种,所述时间序列索引树中每个节点为一个时间段,且作为节点的各个时间段互不重叠,每个所述数据对象的有效时间段对应于至少一个节点。
第三方面,本发明实施例另外提供了一种电子设备,包括:存储器、处理器及存储在所述存储器上并可在所述处理器上运行的计算机程序,所述计算机程序被所述处理器执行时实现如第一方面所述的数据索引构建方法的步骤。
该专利技术资料仅供研究查看技术是否侵权等信息,商用须获得专利权人授权。该专利全部权利属于北京城市网邻信息技术有限公司,未经北京城市网邻信息技术有限公司许可,擅自商用是侵权行为。如果您想购买此专利、获得商业授权和技术合作,请联系【客服】
本文链接:http://www.vipzhuanli.com/pat/books/202110609042.5/2.html,转载请声明来源钻瓜专利网。
- 上一篇:一种发药机器人
- 下一篇:一种黄河鲤鱼五香腌制方法及其腌制装置
- 数据显示系统、数据中继设备、数据中继方法、数据系统、接收设备和数据读取方法
- 数据记录方法、数据记录装置、数据记录媒体、数据重播方法和数据重播装置
- 数据发送方法、数据发送系统、数据发送装置以及数据结构
- 数据显示系统、数据中继设备、数据中继方法及数据系统
- 数据嵌入装置、数据嵌入方法、数据提取装置及数据提取方法
- 数据管理装置、数据编辑装置、数据阅览装置、数据管理方法、数据编辑方法以及数据阅览方法
- 数据发送和数据接收设备、数据发送和数据接收方法
- 数据发送装置、数据接收装置、数据收发系统、数据发送方法、数据接收方法和数据收发方法
- 数据发送方法、数据再现方法、数据发送装置及数据再现装置
- 数据发送方法、数据再现方法、数据发送装置及数据再现装置