[发明专利]一种基于数据湖的数据中台API自动生成系统在审
申请号: | 202211565237.5 | 申请日: | 2022-12-07 |
公开(公告)号: | CN115794863A | 公开(公告)日: | 2023-03-14 |
发明(设计)人: | 黄学平;张永良;陆昶谕;朱晨鸣;石启良;张洪良;陈建;于伟涛;张丹吉 | 申请(专利权)人: | 中通服咨询设计研究院有限公司 |
主分类号: | G06F16/242 | 分类号: | G06F16/242;G06F16/25;G06F16/955 |
代理公司: | 江苏圣典律师事务所 32237 | 代理人: | 于瀚文;胡建华 |
地址: | 210019 江苏*** | 国省代码: | 江苏;32 |
权利要求书: | 查看更多 | 说明书: | 查看更多 |
摘要: | |||
搜索关键词: | 一种 基于 数据 api 自动 生成 系统 | ||
1.一种基于数据湖的数据中台API自动生成系统,其特征在于,包括数据采集模块、数据编目模块、API自动配置模块、API自动生成模块、API自动部署模块;
所述数据采集模块用于将结构化和半结构化的数据采集入湖,并存储在数据湖原始数据区;
所述数据采集模块将采集后存放在原始数据区的数据进行加工后存入生产数据区,生产数据区中的数据包括基本信息、动态信息和统计信息;
所述数据编目模块用于对数据湖中生产数据区中能够提供对外服务的数据进行编目,编目中包括中文资源名称、英文资源名称、信息资源摘要,数据资源编目后形成数据资源元数据;
所述API自动配置模块读取数据编目模块所自动生成的配置模块并选取可能的入参和出参,自动生成请求参数和响应参数配置文件;
所述API自动生成模块根据API自动配置模块生成API服务接口;
所述API自动部署模块采用基于Git和Openshift的自动部署方法,在API自动配置模块所生成的请求参数和响应参数配置文件被监听发生变化后自动推送到GIT服务器上,Git服务器监听到新文件后通过webhook自动触发Openshift拉取git上的源文件并自动编译后打包并部署到一个Docker容器中,完成API接口的自动化部署过程。
2.根据权利要求1所述的系统,其特征在于,所述数据资源元数据包括基本信息和信息项;
其中,基本信息包括resourceId、chineseName、englishName、sourceSystem、publishTime和shareType,resourceId是指资源目录的唯一编码,chineseName是指资源的中文名称,englishName是指资源的英文名称,sourceSystem是指数据资源的来源系统,vendor是指资源的提供方,publishTime是指资源发布时间,shareType是指共享方式;
信息项是一系列的数据项组成的items,表征数据资源的具体字段,items由一列的item组成,每个item由name,datatype,comment组成,name、datatype、comment分别表示数据项名称、数据类型和描述;
编目采用自动化的方式生成并保存在数据编目资源中心,resourceId由随机函数生成,items由数据库中数据资源的元数据获取并自动生成,其它字段采用获取采集信息描述并采用分词提取方法获取并生成。
3.根据权利要求2所述的系统,其特征在于,所述API自动配置模块选择入参的标准如下:
item中存在数据主键的项;
item中存在索引的项;
item中数据类型为time类型的项;
出参为items中的所有item项。
4.根据权利要求3所述的系统,其特征在于,所述API自动配置模块根据入参的标准自动生成请求参数和响应参数配置文件;
所述请求参数能够动态调整,由一系列的fields列表组成,fields列表包括两个以上的单元素field,field包括parameter,type和compulsory属性,其中,parameter为字段名,type为字段类型,compulsory为是否必选,请求参数是否动态由compulsory属性值动态决定;
所述响应参数由一系列的fields列表组成,fields列表包括两个以上的单元素field,field包括parameter和type属性。
5.根据权利要求4所述的系统,其特征在于,API服务接口包括:
API服务的URL部分;
API服务的代码自动生成部分;
其中,API服务的URL由API构成。
该专利技术资料仅供研究查看技术是否侵权等信息,商用须获得专利权人授权。该专利全部权利属于中通服咨询设计研究院有限公司,未经中通服咨询设计研究院有限公司许可,擅自商用是侵权行为。如果您想购买此专利、获得商业授权和技术合作,请联系【客服】
本文链接:http://www.vipzhuanli.com/pat/books/202211565237.5/1.html,转载请声明来源钻瓜专利网。
- 上一篇:一种电机前置一体化屏蔽泵
- 下一篇:移动式园林机械的驻车制动系统
- 数据显示系统、数据中继设备、数据中继方法、数据系统、接收设备和数据读取方法
- 数据记录方法、数据记录装置、数据记录媒体、数据重播方法和数据重播装置
- 数据发送方法、数据发送系统、数据发送装置以及数据结构
- 数据显示系统、数据中继设备、数据中继方法及数据系统
- 数据嵌入装置、数据嵌入方法、数据提取装置及数据提取方法
- 数据管理装置、数据编辑装置、数据阅览装置、数据管理方法、数据编辑方法以及数据阅览方法
- 数据发送和数据接收设备、数据发送和数据接收方法
- 数据发送装置、数据接收装置、数据收发系统、数据发送方法、数据接收方法和数据收发方法
- 数据发送方法、数据再现方法、数据发送装置及数据再现装置
- 数据发送方法、数据再现方法、数据发送装置及数据再现装置