[发明专利]数据批量处理方法、装置、计算机设备及存储介质在审
申请号: | 201811213241.9 | 申请日: | 2018-10-18 |
公开(公告)号: | CN109558440A | 公开(公告)日: | 2019-04-02 |
发明(设计)人: | 金晨;丁猛 | 申请(专利权)人: | 平安科技(深圳)有限公司 |
主分类号: | G06F16/25 | 分类号: | G06F16/25;G06F16/22 |
代理公司: | 深圳众鼎专利商标代理事务所(普通合伙) 44325 | 代理人: | 谭果林 |
地址: | 518000 广东省深圳市福田区福*** | 国省代码: | 广东;44 |
权利要求书: | 查看更多 | 说明书: | 查看更多 |
摘要: | |||
搜索关键词: | 字段 录入 表头 基础数据 映射关系 数据池 计算机设备 存储介质 数据库 映射关系存储 读取 动态自适应 映射关系表 获取数据 自适应 解析 关联 灵活 | ||
1.一种数据批量处理方法,其特征在于,包括:
获取待导入表格,所述待导入表格包括表头字段和基础数据,所述基础数据基于所述表头字段存储,每一所述表头字段对应存储一列所述基础数据;
解析所述待导入表格,读取所述待导入表格的所述表头字段;
获取数据池的录入字段,建立所述表头字段与所述录入字段的映射关系,并将所述表头字段、所述录入字段和所述映射关系存储至映射关系表;
基于所述映射关系,将所述表头字段对应的所述基础数据录入至所述数据池中相应的录入字段中,得到录入数据。
2.如权利要求1所述的数据批量处理方法,其特征在于,在所述基于所述映射关系,将所述表头字段对应的所述基础数据录入至所述数据池中相应的录入字段中,得到录入数据的步骤之后,所述数据批量处理方法还包括:
识别所述待导入表格的模型类型;
获取所述模型类型对应的模型标识;
将所述模型标识存储至与所述待导入表格相对应的映射关系表中。
3.如权利要求1所述的数据批量处理方法,其特征在于,所述解析所述待导入表格,读取所述待导入表格的所述表头字段,具体包括:
采用数据读取算法,遍历所述待导入表格,获取所述表头字段的字段标识;
基于字段标识,读取所述待导入表格的所述表头字段。
4.如权利要求1所述的数据批量处理方法,其特征在于,所述获取数据池的录入字段,建立所述表头字段与所述录入字段的映射关系,并将所述表头字段、所述录入字段和所述映射关系存储至映射关系表,具体包括以下步骤:
读取所述数据池的录入字段,为每一所述表头字段分配一录入字段;
将所述表头字段作为值,对应地将其分配的所述录入字段作为键,将所述表头字段与所述录入字段组成键值对,建立所述表头字段与所述录入字段之间的映射关系;
将所述表头字段、所述录入字段以及所述映射关系存储至所述映射关系表。
5.如权利要求2所述的数据批量处理方法,其特征在于,在所述基于所述映射关系,将所述表头字段对应的所述基础数据录入至所述数据池中相应的录入字段中,得到录入数据的步骤之后,所述数据批量处理方法还包括:
根据预设规则,为所述待导入表格的基础数据分配录入批次号;
在映射关系表中将同一录入批次号的所述表头字段和所述映射关系建立关系主目录;
基于所述关系主目录,为所述数据池中对应的录入数据分配存储批次号。
6.如权利要求5所述的数据批量处理方法,其特征在于,在所述基于所述关系主目录,为所述数据池中对应的录入数据分配存储批次号的步骤之后,所述数据批量处理方法还包括:
获取查询请求,所述查询请求包括目标模型标识;
基于所述目标模型标识,查询映射关系表,获取与所述映射关系表中查询到的所述目标模型标识对应的录入字段和存储批次号;
根据所述录入字段和所述存储批次号查询数据池,批量导出对应的录入数据。
7.一种数据批量处理装置,其特征在于,包括:
表格获取模块,用于获取待导入表格,所述待导入表格包括表头字段和基础数据,所述基础数据基于所述表头字段存储,每一所述表头字段对应存储一列所述基础数据;
表格解析模块,用于解析所述待导入表格,读取所述待导入表格的所述表头字段;
映射关系建立模块,用于获取数据池的录入字段,建立所述表头字段与所述录入字段的映射关系,并将所述表头字段、所述录入字段和所述映射关系存储至映射关系表;
数据录入模块,用于基于所述映射关系,将所述表头字段对应的所述基础数据录入至所述数据池中相应的录入字段中,得到录入数据。
8.如权利要求7所述的数据批量处理装置,其特征在于,所述数据批量处理装置,还包括:
模型类型识别模块,用于识别所述待导入表格的模型类型;
模型标识获取模块,用于获取所述模型类型对应的模型标识;
模型标识存储模块,用于将所述模型标识存储至与所述待导入表格相对应的映射关系表中。
该专利技术资料仅供研究查看技术是否侵权等信息,商用须获得专利权人授权。该专利全部权利属于平安科技(深圳)有限公司,未经平安科技(深圳)有限公司许可,擅自商用是侵权行为。如果您想购买此专利、获得商业授权和技术合作,请联系【客服】
本文链接:http://www.vipzhuanli.com/pat/books/201811213241.9/1.html,转载请声明来源钻瓜专利网。