[发明专利]一种数据处理方法、装置、电子设备及存储介质在审
| 申请号: | 202210357674.1 | 申请日: | 2022-04-06 | 
| 公开(公告)号: | CN114896347A | 公开(公告)日: | 2022-08-12 | 
| 发明(设计)人: | 韩映;金俊杰;李鸿鹏;余溪 | 申请(专利权)人: | 连连银通电子支付有限公司 | 
| 主分类号: | G06F16/28 | 分类号: | G06F16/28;G06F16/27;G06F16/2455;G06F16/22 | 
| 代理公司: | 广州三环专利商标代理有限公司 44202 | 代理人: | 黄盼 | 
| 地址: | 310051 浙江省杭*** | 国省代码: | 浙江;33 | 
| 权利要求书: | 查看更多 | 说明书: | 查看更多 | 
| 摘要: | |||
| 搜索关键词: | 一种 数据处理 方法 装置 电子设备 存储 介质 | ||
1.一种数据处理方法,其特征在于,包括:
获取目标对象的查询请求,所述查询请求携带有所述目标对象对应的目标业务关键字;
解析所述查询请求得到所述目标业务关键字,对所述目标业务关键字进行拼接得到目标主键值;所述目标主键值指示查询范围;
根据所述目标主键值指示的查询范围调用分布式数据库中的列数据,所述列数据包括主键值以及与所述主键值相对应的属性值;所述属性值表征签约状态;
基于所述目标主键值与在所述查询范围内的所述主键值的比对结果,确定所述目标行主键值对应的目标属性值;
根据所述目标属性值表征的签约状态,生成所述目标对象对应的查询结果。
2.根据权利要求1所述的数据处理方法,其特征在于,还包括:
获取结构化的全量数据,所述全量数据包括待存储至所述分布式数据库中的存量数据和增量数据,所述分布式数据库中包含预先创建的第一数据表;
基于预设的行键格式对所述全量数据进行封装,所述行键格式为按照所述主键值设定的格式;
将封装的所述全量数据存储至所述第一数据表中。
3.根据权利要求2所述的数据处理方法,其特征在于,所述获取结构化的全量数据包括:
获取关系型数据库中的所述存量数据;
将所述存量数据根据第二数据表的存储格式存储至所述第二数据表中,所述第二数据表为在分布式数据仓库中创建的数据表;
根据二进制日志的监听结果实时获取所述关系型数据库中的所述增量数据;
将所述增量数据根据所述第二数据表的存储格式存储至所述第二数据表中,所述增量数据与所述存量数据包含相同的所述主键值;
合并所述存量数据和所述增量数据得到所述全量数据。
4.根据权利要求3所述的数据处理方法,其特征在于,所述将封装的所述全量数据存储至所述第一数据表中包括:
建立所述第一数据表与所述第二数据表的映射关系,所述映射关系用于所述全量数据在所述分布式数据库中和所述分布式数据仓库中的同步;
在满足同步条件时,基于所述映射关系将所述全量数据同步至所述第一数据表中。
5.根据权利要求3所述的数据处理方法,其特征在于,所述根据二进制日志的监听结果实时获取所述关系型数据库中的所述增量数据包括:
监听所述关系型数据库的日志变更事件;
在监听到所述日志变更事件时,获取所述关系型数据库中的所述增量数据;所述增量数据为基于所述日志变更事件所对应日志指示的时间段截取的数据;
所述将所述增量数据根据所述第二数据表的存储格式存储至所述第二数据表中包括:
将所述增量数据同步至消息中间件;
通过分布式计算引擎将所述消息中间件中的所述增量数据同步至所述分布式数据仓库的所述第二数据表中。
6.根据权利要求2所述的数据处理方法,其特征在于,所述第一数据表包括预先定义的表名、主键值、列簇,所述列簇中分布有包含所述主键值的所述列数据。
7.根据权利要求1所述的数据处理方法,其特征在于,还包括:向所述目标对象返回所述查询结果。
8.一种数据处理装置,其特征在于,包括:
第一获取模块,用于获取目标对象的查询请求,所述查询请求携带有所述目标对象对应的目标业务关键字;
解析模块,用于解析所述查询请求得到所述目标业务关键字,对所述目标业务关键字进行拼接得到目标主键值;所述目标主键值指示查询范围;
查询模块,用于根据所述目标主键值指示的查询范围调用分布式数据库中的列数据,所述列数据包括主键值以及与所述主键值相对应的属性值;所述属性值表征查询对象的签约状态;
判断模块,用于基于所述目标主键值与在所述查询范围内的所述主键值的比对结果,确定所述目标行主键值对应的目标属性值;
查询结果生成模块,用于根据所述目标属性值表征的签约状态,生成所述目标对象对应的查询结果。
该专利技术资料仅供研究查看技术是否侵权等信息,商用须获得专利权人授权。该专利全部权利属于连连银通电子支付有限公司,未经连连银通电子支付有限公司许可,擅自商用是侵权行为。如果您想购买此专利、获得商业授权和技术合作,请联系【客服】
本文链接:http://www.vipzhuanli.com/pat/books/202210357674.1/1.html,转载请声明来源钻瓜专利网。
- 上一篇:一种三元催化艾灸烟雾净化器
- 下一篇:一种高通量器官芯片及其应用





