[发明专利]一种金融领域的大数据比对方法及系统在审
申请号: | 202211093098.0 | 申请日: | 2022-09-08 |
公开(公告)号: | CN115587584A | 公开(公告)日: | 2023-01-10 |
发明(设计)人: | 李佳丽;张同虎 | 申请(专利权)人: | 建信金融科技有限责任公司 |
主分类号: | G06F40/194 | 分类号: | G06F40/194;G06F16/248;G06Q40/02 |
代理公司: | 北京市兰台律师事务所 11354 | 代理人: | 张峰 |
地址: | 200120 上海市浦东新区*** | 国省代码: | 上海;31 |
权利要求书: | 查看更多 | 说明书: | 查看更多 |
摘要: | |||
搜索关键词: | 一种 金融 领域 数据 方法 系统 | ||
1.一种金融领域的大数据比对方法,其特征在于,包括以下步骤:
获取第一数据源数据和第二数据源数据,通过预设的数据卸数规则分别进行预处理;
根据数据类型和内容分别对第一数据源数据和第二数据源数据分块存储,生成预设数量的第一数据源数据的文件块和第二数据源数据的文件块,且第一数据源数据的文件块和第二数据源数据的文件块相互匹配对等,为每对对等的第一数据源数据的文件块和第二数据源数据的文件块分配相同的标识;
将具有相同标识的第一数据源数据和第二数据源数据的文件块内容分别切割为字段,并提取关键词;
根据预设的映射规则,将具有相同标识的第一数据源数据和第二数据源数据的文件块内的所有关键词进行比对,确定相对应的目标库表单元;
根据预设的比对规则,将相对应的目标库表单元的数据内容进行比对,获得第一数据源数据和第二数据源数据的比对结果并进行保存;
通过可视化窗口展示比对结果。
2.如权利要求1所述的方法,其特征在于,通过预设的数据卸数规则分别进行预处理包括消除数据的格式差异及精度差异。
3.如权利要求1或2所述的方法,其特征在于,所述预设的映射规则,包括:构建映射关联词库,设置映射关联词将第一数据源和第二数据源中相对应的关键词进行关联。
4.如权利要求1或2所述的方法,其特征在于,所述根据预设的比对规则,将相对应的目标库表单元的数据内容进行比对,包括:将相对应的目标库表单元的字段进行一一比对。
5.如权利要求1所述的方法,其特征在于,所述关键词包括客户编号、客户身份信息、数据金额类型及币种符号中的一种或几种。
6.如权利要求1所述的方法,其特征在于,所述通过可视化窗口展示比对结果包括识别差异字段并进行标记,在浏览器界面进行清晰展示。
7.一种金融领域的大数据比对系统,其特征在于,包括:
预处理模块,用于获取第一数据源数据和第二数据源数据,通过预设的数据卸数规则分别进行预处理;
切分模块,根据数据类型和内容分别对第一数据源数据和第二数据源数据分块存储,生成预设数量的第一数据源数据的文件块和第二数据源数据的文件块,且第一数据源数据的文件块和第二数据源数据的文件块相互匹配对等,为每对对等的第一数据源数据的文件块和第二数据源数据的文件块分配相同的标识;
处理模块,用于将具有相同标识的第一数据源数据和第二数据源数据的文件块内容分别切割为字段,并获取关键词;
映射模块,用于根据预设的映射规则,将具有相同标识的第一数据源数据和第二数据源数据的文件块内的所有关键词进行比对,确定相对应的目标库表单元;
比对模块,用于根据预设的比对规则,将相对应的目标库表单元的数据内容进行比对,获得第一数据源数据和第二数据源数据的比对结果并进行保存;
展示模块,通过可视化窗口展示比对结果。
8.一种计算机可读存储介质,其特征在于,所述存储介质上存储有计算机程序,所述计算机程序被处理器执行时实现权利要求1至6中任一项所述的方法。
9.一种电子设备,其特征在于,包括处理器和存储器;
所述存储器,用于存储操作指令;
所述处理器,用于通过调用所述操作指令,执行权利要求1至6中任一项所述的方法。
10.一种计算机程序产品,包括计算机程序和/或指令,其特征在于,该计算机程序和/或指令被处理器执行时实现权利要求1至6中任一项所述方法的步骤。
该专利技术资料仅供研究查看技术是否侵权等信息,商用须获得专利权人授权。该专利全部权利属于建信金融科技有限责任公司,未经建信金融科技有限责任公司许可,擅自商用是侵权行为。如果您想购买此专利、获得商业授权和技术合作,请联系【客服】
本文链接:http://www.vipzhuanli.com/pat/books/202211093098.0/1.html,转载请声明来源钻瓜专利网。
- 数据显示系统、数据中继设备、数据中继方法、数据系统、接收设备和数据读取方法
- 数据记录方法、数据记录装置、数据记录媒体、数据重播方法和数据重播装置
- 数据发送方法、数据发送系统、数据发送装置以及数据结构
- 数据显示系统、数据中继设备、数据中继方法及数据系统
- 数据嵌入装置、数据嵌入方法、数据提取装置及数据提取方法
- 数据管理装置、数据编辑装置、数据阅览装置、数据管理方法、数据编辑方法以及数据阅览方法
- 数据发送和数据接收设备、数据发送和数据接收方法
- 数据发送装置、数据接收装置、数据收发系统、数据发送方法、数据接收方法和数据收发方法
- 数据发送方法、数据再现方法、数据发送装置及数据再现装置
- 数据发送方法、数据再现方法、数据发送装置及数据再现装置