[发明专利]一种迁移和复用数据模型的方法及系统在审
申请号: | 202210632598.0 | 申请日: | 2022-06-07 |
公开(公告)号: | CN114706575A | 公开(公告)日: | 2022-07-05 |
发明(设计)人: | 曹大报 | 申请(专利权)人: | 杭州比智科技有限公司 |
主分类号: | G06F8/36 | 分类号: | G06F8/36;G06F8/76;G06F8/35;G06F16/21 |
代理公司: | 北京云科知识产权代理事务所(特殊普通合伙) 11483 | 代理人: | 张飙 |
地址: | 311121 浙江省杭州市*** | 国省代码: | 浙江;33 |
权利要求书: | 查看更多 | 说明书: | 查看更多 |
摘要: | |||
搜索关键词: | 一种 迁移 数据模型 方法 系统 | ||
本发明公开了一种迁移和复用数据模型的方法及系统,用于同一行业内跨公司或者跨行业迁移和复用,所述方法包括以下步骤:S110.梳理行业业务流程;S120.对业务系统中的业务动作划分为多个主体域;S130.整理每个主体域下包含的业务动作,每个业务动作对应的分析维度,形成对应的总线矩阵;S140.依据总线矩阵设计事实表及维度表;S150.对事实表和维度表进行梳理,建立及初始化行业可复用数据模型,对行业可复用数据模型中涉及的表字段设立第一区、第二区和第三区,并保留对应的开发代码;S160.在同行业其他公司应用所述行业可复用数据模型,并可进行申请评审迭代数据模型,如通过评审确实可以将其进行调整后在其他项目可以直接复用,则更新数据模型及对应的开发代码。
技术领域
本发明涉及计算机及网络通信技术领域,主要是数仓或数据中台模型建设领域,特别涉及一种可以跨行业、跨公司迁移和复用数据模型的方法及系统。
背景技术
随着企业不断发展,企业对数据建设也越来越重视,对数仓或数据中台的建设也越来越迫切,但是由于企业的技术专业性和技术水平的限制,无法系统的做到搭建企业级数据中台,往往需要第三方公司帮助其建设数仓或数据中台。当前第三方公司搭建数仓或数据中台采用的建模方法有:ER实体模型、维度建模、Data Vault模型、Anchor,其中使用最多的是维度建模。随着对数据中台建设需求的企业越来越多,第三方公司面向的客户也不再是某一行业或某一公司,然而,针对跨行业、跨公司进行数据模型建设需求,现有的的处理方法基本上都是:面向不同行业和公司,采用一个客户一套建模方案,针对同一客户下的不同领域数据模型也是不能复用。
这种方法也是有着明显不足,一方面,如果企业前期数据中台建设时,只涉及到客户的某一行业或某一品牌,后期客户的其他行业或其他品牌想要建设数据中台时,就要重新开发设计,另一方面,即使是公司所属行业相同,业务模式相近,也需要重复的设计数据模型,由此是的开发人员不断进行重复工作,项目人员投入也没有得到很好的控制,最终导致企业后期建设及运维工作增加,跨行业、跨公司数据中台建设成本增加。
发明内容
针对现有技术存在的问题,本发明的目的在于提供一种不同公司之间通过复用已有的模型就可以搭建企业级数据平台,在公司内部不同品牌之间也同样适用,因为开发人员只用维护一套数据模型,在公司业务逻辑发生调整时,对应数据部门的工作量也减少很多。
为实现上述目的,本发明提供一种迁移和复用数据模型的方法,用于同一行业内跨公司迁移和复用,所述方法包括以下步骤:
S110.梳理行业业务流程;
S120.对业务系统中的业务动作划分为多个主体域;
S130.整理每个主体域下包含的业务动作,每个业务动作对应的分析维度,形成对应的总线矩阵;
S140.依据总线矩阵设计事实表及维度表,一个业务动作代表一个业务事实,对应一个事实表,一个分析维度对应N个维度表,N大于等于1;
S150.对事实表和维度表进行梳理,建立及初始化行业可复用数据模型,对行业可复用数据模型中涉及的表字段设立第一区、第二区和第三区,并保留对应的开发代码;
S160.在同行业其他公司应用所述行业可复用数据模型,并可进行申请评审迭代数据模型,如通过评审确实可以将其进行调整后在其他项目可以直接复用,则更新数据模型及对应的开发代码。
进一步,整理业务流程中包含的主体、主体之间的业务动作及业务流。
进一步,维度模型采用的星型和雪花模型相结合进行搭建,搭建维度模型的步骤如下:
S210.选择业务过程,业务过程是企业和组织的业务活动,有相应的源头业务系统支持,包括顾客和门店在产生交易的过程产生的业务过程;
S220. 声明粒度,确定数据仓库的数据中保存数据的细化程度或综合程度的级别,其中,订单事实表中一行数据表示的是一个订单中的一个商品项,描述事实表的单个行;在定义粒度过程中,选择业务过程中最为原子性的粒度,以满足业务用户的任何粒度的分析需求;
该专利技术资料仅供研究查看技术是否侵权等信息,商用须获得专利权人授权。该专利全部权利属于杭州比智科技有限公司,未经杭州比智科技有限公司许可,擅自商用是侵权行为。如果您想购买此专利、获得商业授权和技术合作,请联系【客服】
本文链接:http://www.vipzhuanli.com/pat/books/202210632598.0/2.html,转载请声明来源钻瓜专利网。