[发明专利]一种大数据量Excel导入时校验业务主键重复的方法和系统在审
申请号: | 202211737406.9 | 申请日: | 2022-12-29 |
公开(公告)号: | CN116257520A | 公开(公告)日: | 2023-06-13 |
发明(设计)人: | 胡宁;朱玉银;傅昆;朱玮 | 申请(专利权)人: | 浙江中控技术股份有限公司 |
主分类号: | G06F16/22 | 分类号: | G06F16/22;G06F40/174;G06F40/18;G06F16/245 |
代理公司: | 杭州宇信联合知识产权代理有限公司 33401 | 代理人: | 王健 |
地址: | 310053 浙*** | 国省代码: | 浙江;33 |
权利要求书: | 暂无信息 | 说明书: | 暂无信息 |
摘要: | 本发明公开了一种大数据量Excel导入时校验业务主键重复的方法和系统,其中校验业务主键重复的方法包括:读取大数据量Execl文件的表头数据,并对表头数据进行校验;基于预设导入数据量阈值分段读取校验通过的表头数据对应的表体数据,并采集每段表体数据中的业务主键字段;采集数据库中历史数据的业务主键字段,并基于预设历史数据量阈值,选择内存分析方法或文件分析方法对历史数据和表体数据的业务主键字段进行校验;将通过业务主键字段校验的数据对应的其他字段进校验,并将校验通过的数据转换为数据库语句;执行数据库语句将校验通过的数据导入数据库。本发明将大数据量校验从内存转移到文件实现,并采用多文件多线程进行校验,简化比较次数。 | ||
搜索关键词: | 一种 数据量 excel 导入 校验 业务 主键 重复 方法 系统 | ||
【主权项】:
暂无信息
下载完整专利技术内容需要扣除积分,VIP会员可以免费下载。
该专利技术资料仅供研究查看技术是否侵权等信息,商用须获得专利权人授权。该专利全部权利属于浙江中控技术股份有限公司,未经浙江中控技术股份有限公司许可,擅自商用是侵权行为。如果您想购买此专利、获得商业授权和技术合作,请联系【客服】
本文链接:http://www.vipzhuanli.com/patent/202211737406.9/,转载请声明来源钻瓜专利网。