[发明专利]一种基于AI技术的数据治理方法和系统在审
申请号: | 202111540925.1 | 申请日: | 2021-12-16 |
公开(公告)号: | CN114218192A | 公开(公告)日: | 2022-03-22 |
发明(设计)人: | 张天正;李成钢;张碧昭;闫俊佑;余清华;蒋思玉;张宇峰;李忠 | 申请(专利权)人: | 中国电信集团系统集成有限责任公司 |
主分类号: | G06F16/21 | 分类号: | G06F16/21 |
代理公司: | 北京知汇林知识产权代理事务所(普通合伙) 11794 | 代理人: | 杨华 |
地址: | 100036 北京市海淀区*** | 国省代码: | 北京;11 |
权利要求书: | 查看更多 | 说明书: | 查看更多 |
摘要: | |||
搜索关键词: | 一种 基于 ai 技术 数据 治理 方法 系统 | ||
本发明公开了一种基于AI技术的数据治理方法和系统。其中,该数据治理方法包括:通过从生产系统中采集业务数据;通过应用知识库,识别业务数据;在业务数据中存在已知差异数据的情况下,根据已知差异数据,对生产系统数据进行修复,即通过应用知识库识别出业务数据中的差异数据,进而根据差异数据修复生产系统数据,通过闭环稽核流程不断提高业务系统的精准度,进而解决了现有技术中,业务数据精度较低的技术问题。
技术领域
本发明涉及计算机相关领域,具体而言,涉及一种基于AI技术的数据治理方法和系统、存储介质及电子装置。
背景技术
目前,大数据时代的到来,很多企业的业务数据呈爆炸式增长,数据的采集、处理以及数据应用可以提高企业的竞争优势。而数据治理需要专业的技术和管理人员操作,对实际应用有较高门槛要求。
针对上述的问题,目前尚未提出有效的解决方案。
发明内容
本发明实施例提供了一种基于AI技术的数据治理方法、系统、存储介质及电子装置,以至少解决现有技术中,业务数据精度较低的技术问题。
根据本发明实施例的一个方面,提供了一种基于AI技术的数据治理方法,包括:从生产系统中采集业务数据;通过应用知识库,识别所述业务数据;在所述业务数据中存在已知差异数据的情况下,根据所述已知差异数据,对生产系统数据进行修复。
进一步地,所述方法还包括:在所述业务数据中存在未知差异数据的情况下,对所述未知差异数据进行分析和处理,得到分析处理结果;根据所述分析处理结果,对所述生产系统数据进行修复。
进一步地,所述通过应用知识库,识别所述业务数据之前,所述方法还包括:预先根据不同的业务数据建立所述应用知识库。
进一步地,所述在所述业务数据中存在未知差异数据的情况下,对所述未知差异数据进行分析和处理,得到分析处理结果之后,所述方法还包括:根据所述分析处理结果更新所述应用知识库。
进一步地,所述在所述业务数据中存在未知差异数据的情况下,对所述未知差异数据进行分析和处理,得到分析处理结果之后,所述方法还包括:根据所述分析处理结果确定所述业务数据的质量报告。
进一步地,所述对生产系统数据进行修复之后,所述方法还包括:从所述生产系统数据中获取数据对象;将所述数据对象转换为Map对象;从引擎模板中获取指定的模板文件;查找所述引擎模板语言,解析语句逻辑结构,输出目标文件,其中,所述目标文件在被执行时用于处理业务数据。
根据本发明实施例的另一方面,还提供了一种基于AI技术的数据治理系统,包括:采集单元,用于从生产系统中采集业务数据;识别单元,用于通过应用知识库,识别所述业务数据;第一修复单元,用于在所述业务数据中存在已知差异数据的情况下,根据所述已知差异数据,对生产系统数据进行修复。
进一步地,所述系统还包括:分析处理单元,用于在所述业务数据中存在未知差异数据的情况下,对所述未知差异数据进行分析和处理,得到分析处理结果;第二修复单元,用于根据所述分析处理结果,对所述生产系统数据进行修复。
进一步地,所述系统还包括:建立单元,用于所述通过应用知识库,识别所述业务数据之前,预先根据不同的业务数据建立所述应用知识库。
进一步地,所述系统还包括:更新单元,用于所述在所述业务数据中存在未知差异数据的情况下,对所述未知差异数据进行分析和处理,得到分析处理结果之后,根据所述分析处理结果更新所述应用知识库。
进一步地,所述系统还包括:确定单元,用于所述在所述业务数据中存在未知差异数据的情况下,对所述未知差异数据进行分析和处理,得到分析处理结果之后,根据所述分析处理结果确定所述业务数据的质量报告。
该专利技术资料仅供研究查看技术是否侵权等信息,商用须获得专利权人授权。该专利全部权利属于中国电信集团系统集成有限责任公司,未经中国电信集团系统集成有限责任公司许可,擅自商用是侵权行为。如果您想购买此专利、获得商业授权和技术合作,请联系【客服】
本文链接:http://www.vipzhuanli.com/pat/books/202111540925.1/2.html,转载请声明来源钻瓜专利网。
- 上一篇:一种茶油生产设备及加工工艺
- 下一篇:一种栈板车轮部拨正组件及其综合码垛系统
- 数据显示系统、数据中继设备、数据中继方法、数据系统、接收设备和数据读取方法
- 数据记录方法、数据记录装置、数据记录媒体、数据重播方法和数据重播装置
- 数据发送方法、数据发送系统、数据发送装置以及数据结构
- 数据显示系统、数据中继设备、数据中继方法及数据系统
- 数据嵌入装置、数据嵌入方法、数据提取装置及数据提取方法
- 数据管理装置、数据编辑装置、数据阅览装置、数据管理方法、数据编辑方法以及数据阅览方法
- 数据发送和数据接收设备、数据发送和数据接收方法
- 数据发送装置、数据接收装置、数据收发系统、数据发送方法、数据接收方法和数据收发方法
- 数据发送方法、数据再现方法、数据发送装置及数据再现装置
- 数据发送方法、数据再现方法、数据发送装置及数据再现装置