[发明专利]分布式数据库的全局二级索引方法及其装置有效
申请号: | 202111124021.0 | 申请日: | 2021-09-24 |
公开(公告)号: | CN113868251B | 公开(公告)日: | 2022-10-18 |
发明(设计)人: | 曹彪;王猛;杨勇强 | 申请(专利权)人: | 北京百度网讯科技有限公司 |
主分类号: | G06F16/22 | 分类号: | G06F16/22;G06F16/2455;G06F16/27 |
代理公司: | 北京清亦华知识产权代理事务所(普通合伙) 11201 | 代理人: | 罗岚 |
地址: | 100085 北京市*** | 国省代码: | 北京;11 |
权利要求书: | 查看更多 | 说明书: | 查看更多 |
摘要: | |||
搜索关键词: | 分布式 数据库 全局 二级 索引 方法 及其 装置 | ||
本申请公开了一种分布式数据库的全局二级索引方法及其装置,涉及云计算及云数据库领域等计算机技术领域。具体实现方案为:响应于接收到的数据库写入请求,获取待写入的原始数据,并将原始数据写入分布式数据库内;对写入分布式数据库内的原始数据进行全局二级索引处理,得到全局二级索引数据;建立全局二级索引数据与分布式数据库之中数据表主键对应的全局二级索引表,并基于异步处理方式将全局二级索引表写入索引分片。本申请可以极大地提升二级索引场景的写吞吐量,可以进一步降低写延迟。
技术领域
本申请涉及计算机技术领域,进一步设计云计算及云数据库领域等,尤其涉及一种分布式数据库的全局二级索引方法及其装置。
背景技术
大数据时代,数据呈几何方式增长,海量的数据每天以几TB(Terabyte,太字节)甚至几PB(Petabytes,拍字节)的量增长。云上对象存储系统解决了海量存储的问题,其中对象存储的元数据存储在分布式数据库中。相关技术中的分布式数据库普遍基于分布式事务来实现全局二级索引。
但是,上述全局二级索引的方式存在如下问题:由于索引的存在,为了保证主键和索引的原子性触发了分布式事务流程,而分布式事务的代价是非常大的,比如一次事务写入通常需要7次RPC(Remote Procedure Call,远程过程调用)、7次Raft(分布式共识算法)log(日志)以及7次Rocksdb(键值)写入,从而导致索引写入的代价非常大。
发明内容
本申请提供了一种分布式数据库的全局二级索引方法及其装置。
根据本申请的第一方面,提供了一种分布式数据库的全局二级索引方法,包括:
响应于接收到的数据库写入请求,获取待写入的原始数据,并将所述原始数据写入所述分布式数据库内;
对写入所述分布式数据库内的原始数据进行全局二级索引处理,得到全局二级索引数据;
建立所述全局二级索引数据与所述分布式数据库之中数据表主键对应的全局二级索引表,并基于异步处理方式将所述全局二级索引表写入索引分片。
根据本申请的第二方面,提供了一种分布式数据库的全局二级索引装置,包括:
原始数据写入模块,用于响应于接收到的数据库写入请求,获取待写入的原始数据,并将所述原始数据写入所述分布式数据库内;
索引处理模块,用于对写入所述分布式数据库内的原始数据进行全局二级索引处理,得到全局二级索引数据;
索引表创建模块,用于建立所述全局二级索引数据与所述分布式数据库之中数据表主键对应的全局二级索引表,并基于异步处理方式将所述全局二级索引表写入索引分片。
根据本申请的第三方面,提供了一种计算机设备,包括:
至少一个处理器;以及
与所述至少一个处理器通信连接的存储器;其中,
所述存储器存储有可被所述至少一个处理器执行的指令,所述指令被所述至少一个处理器执行,以使所述至少一个处理器能够执行前述第一方面所述的方法。
根据本申请的第四方面,提供了一种存储有计算机指令的非瞬时计算机可读存储介质,其中,所述计算机指令用于使所述计算机执行前述第一方面所述的方法。
根据本申请的第五方面,提供了一种计算机程序产品,包括计算机程序,所述计算机程序被处理器执行时实现前述第一方面所述的方法的步骤。
根据本申请的技术方案,可以极大地提升二级索引场景的写吞吐量,可以进一步降低写延迟。
应当理解,本部分所描述的内容并非旨在标识本申请的实施例的关键或重要特征,也不用于限制本申请的范围。本申请的其它特征将通过以下的说明书而变得容易理解。
该专利技术资料仅供研究查看技术是否侵权等信息,商用须获得专利权人授权。该专利全部权利属于北京百度网讯科技有限公司,未经北京百度网讯科技有限公司许可,擅自商用是侵权行为。如果您想购买此专利、获得商业授权和技术合作,请联系【客服】
本文链接:http://www.vipzhuanli.com/pat/books/202111124021.0/2.html,转载请声明来源钻瓜专利网。