[发明专利]一种数据迁移的方法、系统、电子装置和存储介质有效
申请号: | 202110398368.8 | 申请日: | 2021-04-08 |
公开(公告)号: | CN113220659B | 公开(公告)日: | 2023-06-09 |
发明(设计)人: | 杨鸿博;杨红飞;金霞 | 申请(专利权)人: | 杭州费尔斯通科技有限公司 |
主分类号: | G06F16/21 | 分类号: | G06F16/21;G06F16/22;G06F16/25;G06F16/28;G06F16/901 |
代理公司: | 杭州创智卓英知识产权代理事务所(普通合伙) 33324 | 代理人: | 张超 |
地址: | 310000 浙江省杭州市*** | 国省代码: | 浙江;33 |
权利要求书: | 查看更多 | 说明书: | 查看更多 |
摘要: | |||
搜索关键词: | 一种 数据 迁移 方法 系统 电子 装置 存储 介质 | ||
本申请涉及一种数据迁移的方法、系统、电子装置和存储介质,其中,该方法包括:获取关系型数据库中数据表结构信息,并根据映射关系表对数据表结构信息进行相应的转换;接着对数据进行筛选,并设置新的全局UUIDsubgt;n/subgt;;根据数据表中数据的idsubgt;o/subgt;,从映射关系库Msubgt;DB/subgt;中查询是否存在唯一的全局UUIDsubgt;o/subgt;,如果存在,则将全局UUIDsubgt;o/subgt;设置给该数据,如果不存在,则将全局UUIDsubgt;n/subgt;设置给该数据,并存储到Msubgt;DB/subgt;中;最后将上述完成id设置后的数据分批存储为节点csv文件,等待所有数据都存储为csv文件后,读取该节点csv文件,根据数据的关联字段,在Msubgt;DB/subgt;中查找关联字段对应的关联数据的UUID,建立连边,并将连边存储为连边csv文件,实现了关系型数据库数据向图数据库迁移的目的。
技术领域
本申请涉及计算机领域,特别是涉及一种数据迁移的方法、系统、电子装置和存储介质。
背景技术
随着网络应用形式的不断发展,需要创建越来越多的关系型数据表去实现越来越丰富的网络应用,这些数据表之间既有联系又相互独立,当应用程序需要通过组合查询同时获取不同数据表中的关联数据的时候,会面临巨大的性能瓶颈。如JanusGraph(可扩展的分布式图数据库)等非关系型数据库的出现解决了多种数据源数据同时存储的问题。而现有的工具中并没有从关系型数据库向JanusGraph等图数据库直接导入数据的工具和方法。
在相关技术中,数据的迁移基于消息中间件实现,然而,这种数据迁移每次传输的数据量太小,不利于图数据库初始建立时的数据生成,也不利于创建数据间的链接关系。此外,在部分相关技术中,数据的迁移是在相似的数据库之间进行移动,并没有实现将现有的关系型数据库中的数据迁移到图数据库中的目的。
目前针对相关技术中,存在的缺少将关系型数据库向图数据库直接导入数据的方法的问题,尚未提出有效的解决方案。
发明内容
本申请实施例提供了一种数据迁移的方法、系统、电子装置和存储介质,以至少解决相关技术中存在的缺少将关系型数据库向图数据库直接导入数据的方法的问题。
第一方面,本申请实施例提供了一种数据迁移的方法,所述方法包括:
获取关系型数据库中数据表结构信息,并根据映射关系表对所述数据表结构信息进行相应的转换;
对所述数据表结构信息中的数据进行筛选,并对筛选后的数据设置新的全局UUIDn;
根据所述数据表中数据的ido,从id映射关系库MDB中查询是否存在唯一的全局UUIDo,如果存在,则将所述全局UUIDo设置给所述数据,替换掉所述全局UUIDn,如果不存在,则将所述全局UUIDn设置给所述数据,并存储到所述映射关系库MDB中;
将所述完成id设置后的数据分批存储为节点csv文件,等待所有数据都存储为csv文件后,读取所述节点csv文件,根据所述数据的关联字段,在MDB中查找所述关联字段对应的关联数据的UUID,建立连边,并将所述连边存储为连边csv文件。
在其中一些实施例中,所述根据映射关系表对所述数据表结构信息进行相应的转换包括:
通过所述映射关系表,将所述关系型数据库中的信息转换为对应的图数据库信息,其中所述关系型数据库中的所述信息包括:字段名、属性名称的映射关系、数据表中关联字段的名称、数据表主键的字段名称、数据表中ido字段的名称。
在其中一些实施例中,对所述数据表结构信息中的数据进行筛选包括:
该专利技术资料仅供研究查看技术是否侵权等信息,商用须获得专利权人授权。该专利全部权利属于杭州费尔斯通科技有限公司,未经杭州费尔斯通科技有限公司许可,擅自商用是侵权行为。如果您想购买此专利、获得商业授权和技术合作,请联系【客服】
本文链接:http://www.vipzhuanli.com/pat/books/202110398368.8/2.html,转载请声明来源钻瓜专利网。
- 上一篇:全上肢康复机器人
- 下一篇:一种利用地质聚合物制备蒸压加气混凝土砌块的方法
- 数据显示系统、数据中继设备、数据中继方法、数据系统、接收设备和数据读取方法
- 数据记录方法、数据记录装置、数据记录媒体、数据重播方法和数据重播装置
- 数据发送方法、数据发送系统、数据发送装置以及数据结构
- 数据显示系统、数据中继设备、数据中继方法及数据系统
- 数据嵌入装置、数据嵌入方法、数据提取装置及数据提取方法
- 数据管理装置、数据编辑装置、数据阅览装置、数据管理方法、数据编辑方法以及数据阅览方法
- 数据发送和数据接收设备、数据发送和数据接收方法
- 数据发送装置、数据接收装置、数据收发系统、数据发送方法、数据接收方法和数据收发方法
- 数据发送方法、数据再现方法、数据发送装置及数据再现装置
- 数据发送方法、数据再现方法、数据发送装置及数据再现装置