[发明专利]数据清洗方法、装置及设备

摘要

本发明实施例提供一种数据清洗方法、装置及设备。本发明实施例通过从指定数据库中抽取目标数据表的目标元数据信息，并将目标数据表的内容复制到数据仓库中的中间表，根据目标元数据信息，确定目标数据表的目标清洗任务，按照目标清洗任务中的各清洗规则对中间表执行清洗操作，得到目标数据表对应的目标标准表，将目标标准表发送给指定数据库所在的设备，以由改设备将目标标准表存储至指定数据库，能够根据抽取的元数据信息自动化生成数据表的清洗任务，并按照清洗任务自动完成对数据表的清洗，整个清洗过程自动进行，无需人工干预，并可针对数据库或系统中的全部数据表批量进行清洗，缩短了清洗时间，提高了数据清洗的处理效率。

主权项

1.一种数据清洗方法，其特征在于，所述方法包括：从指定数据库中抽取目标数据表的目标元数据信息，并将所述目标数据表的内容复制到数据仓库中的中间表；根据所述目标元数据信息，确定所述目标数据表的目标清洗任务，所述目标清洗任务包括至少一个清洗规则；按照所述目标清洗任务中的各清洗规则对所述中间表执行清洗操作，得到目标标准表；将所述目标标准表发送给所述指定数据库所在的设备，以由所述设备将所述目标标准表存储至所述指定数据库。