[发明专利]一种数据查询方法和系统在审
申请号: | 201910958773.3 | 申请日: | 2019-10-10 |
公开(公告)号: | CN110716900A | 公开(公告)日: | 2020-01-21 |
发明(设计)人: | 王朝阳 | 申请(专利权)人: | 支付宝(杭州)信息技术有限公司 |
主分类号: | G06F16/13 | 分类号: | G06F16/13;G06F16/14;G06F16/172 |
代理公司: | 51253 成都七星天知识产权代理有限公司 | 代理人: | 杨永梅 |
地址: | 310000 浙江省杭州市*** | 国省代码: | 浙江;33 |
权利要求书: | 查看更多 | 说明书: | 查看更多 |
摘要: | |||
搜索关键词: | 查询结果 文件合并 缓存 数据查询 数据删除 查询 删除文件 原始数据 记录数 数据打 阈值时 磁盘 删除 | ||
1.一种数据查询方法,其特征在于,所述方法包括:
获取磁盘中有效的文件列表,所述有效的文件列表包括至少一个文件;获取所述至少一个文件对应的信息摘要;
根据所述信息摘要查询所述至少一个文件是否存在缓存的查询结果,是则获取所述查询结果;否则查询所述信息摘要对应的文件并将该查询结果进行缓存。
2.如权利要求1所述的数据查询方法,其特征在于,所述获取所述至少一个文件对应的信息摘要包括:
利用信息摘要算法确定所述至少一个文件对应的信息摘要。
3.如权利要求1所述的数据查询方法,其特征在于,所述根据所述信息摘要查询所述至少一个文件是否存在缓存的查询结果,所述查询结果的确定方法包括:
获取查询条件,并基于所述查询条件在所述至少一个文件的缓存中获取所述至少一个文件的信息摘要;
根据所述至少一个文件的信息摘要判断所述至少一个文件是否变化,当所述至少一个文件未变化则获取所述至少一个文件缓存的查询结果;
否则查询所述信息摘要对应的文件并将该查询结果进行缓存。
4.如权利要求1所述的数据查询方法,其特征在于,所述查询所述信息摘要对应的文件并将该查询结果进行缓存包括:
过滤所述至少一个文件的子查询的返回数据;
合并过滤后的所述子查询的返回数据,生成查询结果并缓存。
5.如权利要求1所述的数据查询方法,其特征在于,所述方法还包括:
过滤所述查询结果中标记删除的数据记录。
6.如权利要求1所述的数据查询方法,其特征在于,所述方法还包括:
响应于数据更新请求,将数据更新信息写入内存;
当所述内存中更新信息的记录数等于第一阈值时,将所述内存中记录的所述更新信息序列化到磁盘;
获取所述磁盘中所述更新信息的记录数满足设定的合并条件的文件,当所述文件的个数达到第二阈值时,将所述文件合并写入所述磁盘。
7.如权利要求6所述的数据查询方法,其特征在于,所述方法还包括:
清理所述磁盘中合并文件对应的原始数据文件,并将所述合并文件纳入所述文件列表。
8.如权利要求1所述的数据查询方法,其特征在于,所述方法还包括:
当数据需要更新时,对待更新数据对应的记录逻辑标记删除,并将更新数据写入所述内存。
9.一种数据查询系统,其特征在于,包括获取模块和查找模块;
所述获取模块用于获取磁盘中的有效文件列表,所述有效的文件列表包括至少一个文件;以及获取所述至少一个文件对应的信息摘要;
所述查找模块用于根据所述信息摘要查询所述至少一个文件是否存在缓存的查询结果,是则获取所述查询结果;否则查询所述信息摘要对应的文件并将该查询结果进行缓存。
10.如权利要求9所述的数据查询系统,其特征在于,所述获取模块还用于:
利用信息摘要算法确定所述至少一个文件对应的信息摘要。
11.如权利要求9所述的数据查询系统,其特征在于,所述获取模块还用于获取查询条件,并基于所述查询条件在所述至少一个文件的缓存中获取所述至少一个文件的信息摘要;
所述查找模块还用于根据所述至少一个文件的信息摘要判断所述至少一个文件是否变化,当所述至少一个文件未变化则获取所述至少一个文件缓存的查询结果;否则查询所述信息摘要对应的文件并将该查询结果进行缓存。
12.如权利要求9所述的数据查询系统,其特征在于,所述查找模块还用于:
过滤所述至少一个文件的子查询的返回数据;
合并过滤后的所述子查询的返回数据,生成查询结果并缓存。
该专利技术资料仅供研究查看技术是否侵权等信息,商用须获得专利权人授权。该专利全部权利属于支付宝(杭州)信息技术有限公司,未经支付宝(杭州)信息技术有限公司许可,擅自商用是侵权行为。如果您想购买此专利、获得商业授权和技术合作,请联系【客服】
本文链接:http://www.vipzhuanli.com/pat/books/201910958773.3/1.html,转载请声明来源钻瓜专利网。