[发明专利]一种数据迁移的方法、系统、电子装置和存储介质有效

专利信息
申请号: 202110398368.8 申请日: 2021-04-08
公开(公告)号: CN113220659B 公开(公告)日: 2023-06-09
发明(设计)人: 杨鸿博;杨红飞;金霞 申请(专利权)人: 杭州费尔斯通科技有限公司
主分类号: G06F16/21 分类号: G06F16/21;G06F16/22;G06F16/25;G06F16/28;G06F16/901
代理公司: 杭州创智卓英知识产权代理事务所(普通合伙) 33324 代理人: 张超
地址: 310000 浙江省杭州市*** 国省代码: 浙江;33
权利要求书: 查看更多 说明书: 查看更多
摘要:
搜索关键词: 一种 数据 迁移 方法 系统 电子 装置 存储 介质
【说明书】:

本申请涉及一种数据迁移的方法、系统、电子装置和存储介质,其中,该方法包括:获取关系型数据库中数据表结构信息,并根据映射关系表对数据表结构信息进行相应的转换;接着对数据进行筛选,并设置新的全局UUIDsubgt;n/subgt;;根据数据表中数据的idsubgt;o/subgt;,从映射关系库Msubgt;DB/subgt;中查询是否存在唯一的全局UUIDsubgt;o/subgt;,如果存在,则将全局UUIDsubgt;o/subgt;设置给该数据,如果不存在,则将全局UUIDsubgt;n/subgt;设置给该数据,并存储到Msubgt;DB/subgt;中;最后将上述完成id设置后的数据分批存储为节点csv文件,等待所有数据都存储为csv文件后,读取该节点csv文件,根据数据的关联字段,在Msubgt;DB/subgt;中查找关联字段对应的关联数据的UUID,建立连边,并将连边存储为连边csv文件,实现了关系型数据库数据向图数据库迁移的目的。

技术领域

本申请涉及计算机领域,特别是涉及一种数据迁移的方法、系统、电子装置和存储介质。

背景技术

随着网络应用形式的不断发展,需要创建越来越多的关系型数据表去实现越来越丰富的网络应用,这些数据表之间既有联系又相互独立,当应用程序需要通过组合查询同时获取不同数据表中的关联数据的时候,会面临巨大的性能瓶颈。如JanusGraph(可扩展的分布式图数据库)等非关系型数据库的出现解决了多种数据源数据同时存储的问题。而现有的工具中并没有从关系型数据库向JanusGraph等图数据库直接导入数据的工具和方法。

在相关技术中,数据的迁移基于消息中间件实现,然而,这种数据迁移每次传输的数据量太小,不利于图数据库初始建立时的数据生成,也不利于创建数据间的链接关系。此外,在部分相关技术中,数据的迁移是在相似的数据库之间进行移动,并没有实现将现有的关系型数据库中的数据迁移到图数据库中的目的。

目前针对相关技术中,存在的缺少将关系型数据库向图数据库直接导入数据的方法的问题,尚未提出有效的解决方案。

发明内容

本申请实施例提供了一种数据迁移的方法、系统、电子装置和存储介质,以至少解决相关技术中存在的缺少将关系型数据库向图数据库直接导入数据的方法的问题。

第一方面,本申请实施例提供了一种数据迁移的方法,所述方法包括:

获取关系型数据库中数据表结构信息,并根据映射关系表对所述数据表结构信息进行相应的转换;

对所述数据表结构信息中的数据进行筛选,并对筛选后的数据设置新的全局UUIDn;

根据所述数据表中数据的ido,从id映射关系库MDB中查询是否存在唯一的全局UUIDo,如果存在,则将所述全局UUIDo设置给所述数据,替换掉所述全局UUIDn,如果不存在,则将所述全局UUIDn设置给所述数据,并存储到所述映射关系库MDB中;

将所述完成id设置后的数据分批存储为节点csv文件,等待所有数据都存储为csv文件后,读取所述节点csv文件,根据所述数据的关联字段,在MDB中查找所述关联字段对应的关联数据的UUID,建立连边,并将所述连边存储为连边csv文件。

在其中一些实施例中,所述根据映射关系表对所述数据表结构信息进行相应的转换包括:

通过所述映射关系表,将所述关系型数据库中的信息转换为对应的图数据库信息,其中所述关系型数据库中的所述信息包括:字段名、属性名称的映射关系、数据表中关联字段的名称、数据表主键的字段名称、数据表中ido字段的名称。

在其中一些实施例中,对所述数据表结构信息中的数据进行筛选包括:

下载完整专利技术内容需要扣除积分,VIP会员可以免费下载。

该专利技术资料仅供研究查看技术是否侵权等信息,商用须获得专利权人授权。该专利全部权利属于杭州费尔斯通科技有限公司,未经杭州费尔斯通科技有限公司许可,擅自商用是侵权行为。如果您想购买此专利、获得商业授权和技术合作,请联系【客服

本文链接:http://www.vipzhuanli.com/pat/books/202110398368.8/2.html,转载请声明来源钻瓜专利网。

×

专利文献下载

说明:

1、专利原文基于中国国家知识产权局专利说明书;

2、支持发明专利 、实用新型专利、外观设计专利(升级中);

3、专利数据每周两次同步更新,支持Adobe PDF格式;

4、内容包括专利技术的结构示意图流程工艺图技术构造图

5、已全新升级为极速版,下载速度显著提升!欢迎使用!

请您登陆后,进行下载,点击【登陆】 【注册】

关于我们 寻求报道 投稿须知 广告合作 版权声明 网站地图 友情链接 企业标识 联系我们

钻瓜专利网在线咨询

周一至周五 9:00-18:00

咨询在线客服咨询在线客服
tel code back_top