[发明专利]一种整合数据源中的数据的方法及装置在审
申请号: | 201811441755.X | 申请日: | 2018-11-29 |
公开(公告)号: | CN109558443A | 公开(公告)日: | 2019-04-02 |
发明(设计)人: | 辜国强;周国梁;赵鹏 | 申请(专利权)人: | 北京数聚鑫云信息技术有限公司 |
主分类号: | G06F16/25 | 分类号: | G06F16/25 |
代理公司: | 北京名华博信知识产权代理有限公司 11453 | 代理人: | 白莹;苗源 |
地址: | 100015 北京市朝阳区酒仙*** | 国省代码: | 北京;11 |
权利要求书: | 查看更多 | 说明书: | 查看更多 |
摘要: | |||
搜索关键词: | 整合 元数据信息 数据源 数据记录 数据整合 统一数据格式 读写数据 获取数据 提取数据 字段信息 映射 字段 标准化 转换 记录 配置 统一 | ||
1.一种整合数据源中的数据的方法,其特征在于,包括:
获取数据源和/或数据整合目标的数据记录的元数据信息;
基于数据源和/或数据整合目标的格式和元数据信息,从数据源提取数据记录,对所提取出的数据记录进行整合,得到相应的整合数据,
其中,所述元数据信息包括字段信息,所述数据记录包括具体的字段值。
2.如权利要求1所述的整合数据源中的数据的方法,其特征在于,还包括:
定义所述元数据信息。
3.如权利要求2所述的整合数据源中的数据的方法,其特征在于,所述基于数据源和/或数据整合目标的格式和元数据信息,从数据源提取数据记录,对所提取出的数据记录进行整合,得到相应的整合数据的步骤包括:
使用第一接口,读取数据源和/或数据整合目标的格式和元数据信息;和/或
使用不同的第二接口,从数据源提取数据记录;和/或
从所述元数据信息中选择需要整合的具体元数据信息,将所选择的具体元数据信息所对应的数据记录中的数据整合在一起,作为所述相应的整合数据。
4.如权利要求1所述的整合数据源中的数据的方法,其特征在于,所述数据源和/或数据整合目标包括下列中的至少一种:CSV文件、JSON文件、XML文件、Excel文件、医疗行业标准HL7文件、数字交换文件EDI。
5.如权利要求3所述的整合数据源中的数据的方法,其特征在于,所述从所述元数据信息中选择需要整合的具体元数据信息的步骤包括:
使用表达式来指定所选择的数据源和/或数据整合目标、所选择的数据源和/或数据整合目标的数据字段名和/或针对数据的具体操作,
其中,所述具体操作包括类型转换操作、格式转换操作、字符串操作、算术运算操作、逻辑运算操作。
6.一种整合数据源中的数据的装置,其特征在于,包括:
元数据信息获取模块,用于获取数据源和/或数据整合目标的数据记录的元数据信息;
数据整合模块,用于基于数据源和/或数据整合目标的格式和元数据信息,从数据源提取数据记录,对所提取出的数据记录进行整合,得到相应的整合数据,
其中,所述元数据信息包括字段信息,所述数据记录包括具体的字段值。
7.如权利要求6所述的整合数据源中的数据的装置,其特征在于,还包括:
元数据信息定义模块,用于定义所述元数据信息。
8.如权利要求7所述的整合数据源中的数据的装置,其特征在于,所述数据整合模块还用于:
使用第一接口,读取数据源和/或数据整合目标的格式和元数据信息;和/或
使用不同的第二接口,从数据源提取数据记录;和/或
从所述元数据信息中选择需要整合的具体元数据信息,将所选择的具体元数据信息所对应的数据记录中的数据整合在一起,作为所述相应的整合数据。
9.如权利要求6所述的整合数据源中的数据的装置,其特征在于,所述数据源和/或数据整合目标包括下列中的至少一种:CSV文件、JSON文件、XML文件、Excel文件、医疗行业标准HL7文件、数字交换文件EDI。
10.如权利要求8所述的整合数据源中的数据的装置,其特征在于,所述数据整合模块还用于:
使用表达式来指定所选择的数据源和/或数据整合目标、所选择的数据源和/或数据整合目标的数据字段名和/或针对数据的具体操作,
其中,所述具体操作包括类型转换操作、格式转换操作、字符串操作、算术运算操作、逻辑运算操作。
该专利技术资料仅供研究查看技术是否侵权等信息,商用须获得专利权人授权。该专利全部权利属于北京数聚鑫云信息技术有限公司,未经北京数聚鑫云信息技术有限公司许可,擅自商用是侵权行为。如果您想购买此专利、获得商业授权和技术合作,请联系【客服】
本文链接:http://www.vipzhuanli.com/pat/books/201811441755.X/1.html,转载请声明来源钻瓜专利网。
- 上一篇:一种数据实时汇聚方法及系统
- 下一篇:数据检索方法及装置