[发明专利]一种数据查询方法、装置、设备及存储介质有效
| 申请号: | 201810771160.4 | 申请日: | 2018-07-13 |
| 公开(公告)号: | CN108920695B | 公开(公告)日: | 2019-09-10 |
| 发明(设计)人: | 刘浩;陈振强;徐飞;谯从彬 | 申请(专利权)人: | 星环信息科技(上海)有限公司 |
| 主分类号: | G06F16/27 | 分类号: | G06F16/27;G06F16/2453 |
| 代理公司: | 北京品源专利代理有限公司 11332 | 代理人: | 孟金喆 |
| 地址: | 200233 上海市*** | 国省代码: | 上海;31 |
| 权利要求书: | 查看更多 | 说明书: | 查看更多 |
| 摘要: | |||
| 搜索关键词: | 目标文件 目标数据块 过滤条件 数据查询 增量文件 过滤 操作信息 查询结果 存储介质 读取结果 过滤结果 数据库 读取 数据查询请求 查询性能 读取文件 数据读取 数据块 保证 | ||
1.一种数据查询方法,其特征在于,包括:
当检测到数据查询请求时,根据所述数据查询请求生成过滤条件,并获取数据库中的目标文件,其中,目标文件包括基础文件,或者基础文件和第一增量文件;所述第一增量文件为仅包括增加操作信息的增量文件;
确定所述目标文件中受到第二增量文件影响的目标数据块,第二增量文件为包括修改操作信息的增量文件;
根据所述过滤条件对所述目标文件中除所述目标数据块之外的数据块进行过滤,得到过滤结果;对所述目标数据块和数据库中除所述目标文件之外的文件,直接进行读取,得到读取结果;
根据所述过滤条件对所述过滤结果和所述读取结果进行再次过滤,生成最终查询结果。
2.根据权利要求1所述的方法,其特征在于,还包括:
当检测到所述数据库中存在至少一个第二增量文件时,获取所述至少一个第二增量文件的统计信息,所述统计信息包含需要修改的数据块的内部行号的最大值和最小值;
针对每一个第二增量文件,根据所述内部行号的最大值和最小值确定与所述过滤条件对应的数据列的内部行号范围;
根据每一个第二增量文件对应的内部行号范围,确定所述过滤条件对应数据列的内部行号总范围。
3.根据权利要求2所述的方法,其特征在于,所述确定所述目标文件中受到第二增量文件影响的目标数据块,包括:
从所述目标文件中确定与所述内部行号总范围对应的数据块,将所述数据块作为所述目标文件对应的目标数据块。
4.根据权利要求1所述的方法,其特征在于,还包括:
当检测到所述数据库中存在至少一个第二增量文件时,获取所述至少一个第二增量文件的文件内容;
针对每一个第二增量文件,根据所述文件内容确定所述过滤条件对应数据列的内部行号;
根据每一个第二增量文件对应的内部行号确定所述过滤条件对应数据列的内部行号集合。
5.根据权利要求4所述的方法,其特征在于,所述确定所述目标文件中受到第二增量文件影响的目标数据块,包括:
从所述目标文件中确定与所述内部行号集合对应的数据块,将所述数据块作为所述目标文件对应的目标数据块。
6.根据权利要求1所述的方法,其特征在于,在根据所述过滤条件对所述目标文件中除所述目标数据块之外的数据块进行过滤之前,还包括:
当检测到所述过滤条件包含至少两个子过滤条件时,按照所述过滤条件的逻辑关系将所述过滤条件拆分成至少两个子过滤条件;
所述根据所述过滤条件对所述目标文件中除所述目标数据块之外的数据块进行过滤,得到过滤结果,包括:
根据所述至少两个子过滤条件对所述目标文件中除所述目标数据块之外的数据块进行过滤,得到过滤结果;
所述根据所述过滤条件对所述过滤结果和所述读取结果进行再次过滤,生成最终查询结果,包括:
根据所述至少两个子过滤条件对所述过滤结果和所述读取结果进行再次过滤,生成最终查询结果。
将之前得到的结果进行再次过滤,生成最终的查询结果
7.一种数据查询装置,其特征在于,包括:
目标文件获取模块,用于当检测到数据查询请求时,根据所述数据查询请求生成过滤条件,并获取数据库中的目标文件,其中,目标文件包括基础文件,或者基础文件和第一增量文件;所述第一增量文件为仅包括增加操作信息的增量文件;
影响范围确定模块,用于确定所述目标文件中受到第二增量文件影响的目标数据块,第二增量文件为包括修改操作信息的增量文件;
文件过滤模块,用于根据所述过滤条件对所述目标文件中除所述目标数据块之外的数据块进行过滤,得到过滤结果;对所述目标数据块和数据库中除所述目标文件之外的文件直接进行读取,得到读取结果;
查询结果生成模块,用于根据所述过滤条件对所述过滤结果和所述读取结果进行再次过滤,生成最终查询结果。
该专利技术资料仅供研究查看技术是否侵权等信息,商用须获得专利权人授权。该专利全部权利属于星环信息科技(上海)有限公司,未经星环信息科技(上海)有限公司许可,擅自商用是侵权行为。如果您想购买此专利、获得商业授权和技术合作,请联系【客服】
本文链接:http://www.vipzhuanli.com/pat/books/201810771160.4/1.html,转载请声明来源钻瓜专利网。
- 上一篇:一种短文本多标签分类方法及装置
- 下一篇:一种应用程序的推荐方法、装置及终端





