[发明专利]一种支持扩展的模块化大数据清理系统在审
| 申请号： | 201711239777.3 | 申请日： | 2017-12-01 |
| 公开（公告）号： | CN110019160A | 公开（公告）日： | 2019-07-16 |
| 发明（设计）人： | 祁建明;周峻松;徐继峰;陈墩金 | 申请（专利权）人： | 广州明领基因科技有限公司 |
| 主分类号： | G06F16/215 | 分类号： | G06F16/215 |
| 代理公司： | 暂无信息 | 代理人： | 暂无信息 |
| 地址： | 510610 广东省广州市天河区*** | 国省代码： | 广东;44 |
| 权利要求书： | 查看更多 | 说明书： | 查看更多 |
| 摘要： | 本发明公开了一种支持扩展的模块化大数据清理系统，该系统包括：数据标准化模块、规则及字典共享模块、数据分析模块、记录匹配与合并模块以及数据增强模块；其中，所述数据标准化模块、所述数据分析模块、所述记录匹配与合并模块以及所述数据增强模块均仅与所述规则及字典共享模块直接进行数据交互；所述规则及字典共享模块作为共享资源支持系统的各个功能模块。本发明方案引入术语模型、过程描述文件、共享库等概念及技术，将用户所要求的数据清洗任务由不同的功能模块以流程的形式来定义和完成，实现了模块的高度独立性和系统的可扩展性。 | ||
| 搜索关键词： | 共享模块 字典 数据分析模块 数据标准化 合并模块 记录匹配 清理系统 数据增强 大数据 模块化 共享资源 过程描述 可扩展性 数据交互 数据清洗 支持系统 共享库 独立性 引入 | ||
【主权项】：
1.一种支持扩展的模块化大数据清理系统，其特征在于，所述系统包括：数据标准化模块、规则及字典共享模块、数据分析模块、记录匹配与合并模块以及数据增强模块；其中，所述数据标准化模块、所述数据分析模块、所述记录匹配与合并模块以及所述数据增强模块均仅与所述规则及字典共享模块直接进行数据交互；所述规则及字典共享模块作为共享资源支持系统的各个功能模块。
下载完整专利技术内容需要扣除积分，VIP会员可以免费下载。
该专利技术资料仅供研究查看技术是否侵权等信息，商用须获得专利权人授权。该专利全部权利属于广州明领基因科技有限公司，未经广州明领基因科技有限公司许可，擅自商用是侵权行为。如果您想购买此专利、获得商业授权和技术合作，请联系【客服】
本文链接：http://www.vipzhuanli.com/patent/201711239777.3/，转载请声明来源钻瓜专利网。
- 上一篇：针对不完整数据的大数据清洗方法
- 下一篇：基于信息熵理论的异常数据清洗方法
