[发明专利]数据处理方法、装置、电子设备及存储介质有效
申请号: | 201810962480.8 | 申请日: | 2018-08-22 |
公开(公告)号: | CN109344154B | 公开(公告)日: | 2023-05-30 |
发明(设计)人: | 吴远春 | 申请(专利权)人: | 中国平安人寿保险股份有限公司 |
主分类号: | G06F16/22 | 分类号: | G06F16/22;G06F18/23 |
代理公司: | 深圳市联鼎知识产权代理有限公司 44232 | 代理人: | 刘抗美 |
地址: | 518000 广东省深圳市福田区益田路503*** | 国省代码: | 广东;44 |
权利要求书: | 查看更多 | 说明书: | 查看更多 |
摘要: | 本发明的实施例提供了一种数据处理方法、装置、电子设备及存储介质,涉及大数据技术领域。该方法包括:基于多个数据表的表结构信息对多个数据表进行聚类处理获得多个类簇;确定各个类簇的类簇中心向量与多个标准模板表之间的距离,并基于所述距离确定各个类簇的类簇模板表;基于各个类簇的类簇模板表中的字段对各个类簇中的数据表的字段进行合并处理;基于类簇模板表中各字段的校验规则对各个类簇中合并处理后的数据表的字段进行校验,并将校验通过的数据表导入到目标数据库中。本发明实施例的技术方案能够自动地对数据表中的海量数据进行合并、校验、导入,提高了数据处理效率。 | ||
搜索关键词: | 数据处理 方法 装置 电子设备 存储 介质 | ||
【主权项】:
1.一种数据处理方法,其特征在于,包括:基于多个数据表的表结构信息对所述多个数据表进行聚类处理获得多个类簇;确定各个类簇的类簇中心向量与多个标准模板表之间的距离,并基于所述距离确定各个类簇的类簇模板表;基于各个类簇的类簇模板表中的字段对各个类簇中的数据表的字段进行合并处理;基于所述类簇模板表中各字段的校验规则对各个类簇中合并处理后的数据表的字段进行校验,并将校验通过的数据表导入到目标数据库中。
下载完整专利技术内容需要扣除积分,VIP会员可以免费下载。
该专利技术资料仅供研究查看技术是否侵权等信息,商用须获得专利权人授权。该专利全部权利属于中国平安人寿保险股份有限公司,未经中国平安人寿保险股份有限公司许可,擅自商用是侵权行为。如果您想购买此专利、获得商业授权和技术合作,请联系【客服】
本文链接:http://www.vipzhuanli.com/patent/201810962480.8/,转载请声明来源钻瓜专利网。