[发明专利]食品监管信息资源增量ETL系统及方法在审
| 申请号： | 201910287325.5 | 申请日： | 2019-04-11 |
| 公开（公告）号： | CN109992621A | 公开（公告）日： | 2019-07-09 |
| 发明（设计）人： | 郭承湘;李建忠;石怀明;封荣日 | 申请（专利权）人： | 郭承湘 |
| 主分类号： | G06F16/25 | 分类号： | G06F16/25;G06Q10/06;G06Q50/26 |
| 代理公司： | 北京天盾知识产权代理有限公司 11421 | 代理人： | 贺丽娟 |
| 地址： | 530000 广西壮族自治区*** | 国省代码： | 广西;45 |
| 权利要求书： | 查看更多 | 说明书： | 查看更多 |
| 摘要： | |||
| 搜索关键词： | 源数据库 目标库 食品监管 信息资源 缓存 分类标记 数据仓库 去重 映射 排序 抽取 食品安全监管 数据增量抽取 目标表数据 删除数据 数据更新 数据过滤 应用运行 合并 数据源 过滤 仓库 应用 | ||
1.一种食品监管信息资源增量ETL的方法，应用于食品监管信息资源增量ETL系统，其特征在于，所述方法包括：
抽取目标库及源数据库中的数据至kettle缓存；
在kettle缓存中分别排序、去重目标库及源数据库中的数据；
合并排序、去重后的目标库及源数据库中的数据；
分类标记、映射合并后的目标库及源数据库中的数据；
过滤分类标记及映射后的目标库及源数据库中的数据进行，将目标库及源数据库中相同的数据过滤；及
根据源数据库的数据更新目标库的数据。
2.如权利要求1所述的食品监管信息资源增量ETL的方法，其特征在于，所述根据源数据库的数据更新目标库的数据具体包括：
将目标库中没有，但是源数据库中有的数据新增到所述目标库中。
3.如权利要求2所述的食品监管信息资源增量ETL的方法，其特征在于，所述根据源数据库的数据更新目标库的数据具体包括：
将源数据库中值发生了变化的数据，在所述目标库中做更新处理。
4.一种食品监管信息资源增量ETL系统，其特征在于，所述食品监管信息资源增量ETL系统包括存储器和处理器，所述存储器上存储有可在所述处理器上运行的食品监管信息资源增量ETL程序，所述食品监管信息资源增量ETL程序被所述处理器执行时实现如下步骤：
抽取目标库及源数据库中的数据至kettle缓存；
在kettle缓存中分别排序、去重目标库及源数据库中的数据；
合并排序、去重后的目标库及源数据库中的数据；
分类标记、映射合并后的目标库及源数据库中的数据；
过滤分类标记及映射后的目标库及源数据库中的数据进行，将目标库及源数据库中相同的数据过滤；及
根据源数据库的数据更新目标库的数据。
5.如权利要求4所述的食品监管信息资源增量ETL系统，其特征在于，所述食品监管信息资源增量ETL程序还可被所述处理器执行，以所述根据源数据库的数据更新目标库的数据的步骤中具体实现如下步骤：
将目标库中没有，但是源数据库中有的数据新增到所述目标库中。
6.如权利要求4所述的食品监管信息资源增量ETL系统，其特征在于，所述食品监管信息资源增量ETL程序还可被所述处理器执行，以所述根据源数据库的数据更新目标库的数据的步骤中具体实现如下步骤：
将源数据库中值发生了变化的数据，在所述目标库中做更新处理。
7.一种计算机可读存储介质，其特征在于，所述计算机可读存储介质上存储有食品监管信息资源增量ETL程序，所述食品监管信息资源增量ETL程序可被一个或者多个处理器执行，以实现如权利要求1至3中任一项所述的食品监管信息资源增量ETL的方法的步骤。
该专利技术资料仅供研究查看技术是否侵权等信息，商用须获得专利权人授权。该专利全部权利属于郭承湘，未经郭承湘许可，擅自商用是侵权行为。如果您想购买此专利、获得商业授权和技术合作，请联系【客服】
本文链接：http://www.vipzhuanli.com/pat/books/201910287325.5/1.html，转载请声明来源钻瓜专利网。
- 上一篇：智能控制会话式计算机系统
- 下一篇：一种应急资源共享交换系统
