[发明专利]一种数据处理方法、装置、电子设备及存储介质在审
申请号: | 202011018410.0 | 申请日: | 2020-09-24 |
公开(公告)号: | CN112131854A | 公开(公告)日: | 2020-12-25 |
发明(设计)人: | 迟立辉;万鹏;骆俊杰 | 申请(专利权)人: | 北京开科唯识技术股份有限公司 |
主分类号: | G06F40/186 | 分类号: | G06F40/186;G06K9/62;G06Q40/04;H04L29/08 |
代理公司: | 北京超凡宏宇专利代理事务所(特殊普通合伙) 11463 | 代理人: | 荣颖佳 |
地址: | 100082 北京市*** | 国省代码: | 北京;11 |
权利要求书: | 查看更多 | 说明书: | 查看更多 |
摘要: | |||
搜索关键词: | 一种 数据处理 方法 装置 电子设备 存储 介质 | ||
1.一种数据处理方法,其特征在于,所述数据处理方法包括:
获取来自数据源端的多种类型的候选数据;
针对每种类型的候选数据,确定与该候选数据的类型相匹配的处理规则,并基于所述处理规则对所述候选数据进行处理,得到处理后的待使用数据;
基于所述待使用数据对应的目的端,选取与所述目的端相匹配的数据文件配置模板;
根据所述数据文件配置模板以及所述待使用数据,生成对应于所述目的端的数据文件,并将生成的所述数据文件发送给所述目的端。
2.根据权利要求1所述的数据处理方法,其特征在于,所述获取来自数据源端的多种类型的候选数据,包括:
接收所述数据源端提供的多种类型的原始数据;
若所述原始数据位于与所述原始数据的类型相匹配的阈值范围内,则将所述原始数据确定为所述候选数据;
若所述原始数据位于与所述原始数据的类型相匹配的阈值范围外,则对所述原始数据进行调整,以使调整后的原始数据位于所述阈值范围内,并将所述调整后的原始数据确定为所述候选数据。
3.根据权利要求1所述的数据处理方法,其特征在于,所述获取来自数据源端的多种类型的候选数据,还包括:
接收所述数据源端提供的多种类型的原始数据;
若所述原始数据的多种类型与预设的标准类型相一致,则将所述原始数据确定为所述候选数据;
若所述原始数据的多种类型与预设的标准类型不一致,则生成对应的数据调整提示信息。
4.根据权利要求1所述的数据处理方法,其特征在于,所述数据处理方法还包括:
在基于所述处理规则对所述候选数据进行处理的过程中,监控对应的处理时间,若所述处理时间大于第一预设阈值,则停止对所述候选数据进行处理,并显示对应的预警信息;
在根据所述数据文件配置模板以及所述待使用数据生成对应于所述目的端的数据文件的过程中,监控生成所述数据文件的生成时间,若所述生成时间大于第二预设阈值,则停止生成所述数据文件。
5.根据权利要求1所述的数据处理方法,其特征在于,所述针对每种类型的候选数据,确定与该候选数据的类型相匹配的处理规则,并基于所述处理规则对所述候选数据进行处理,得到处理后的待使用数据,包括:
针对每种类型的候选数据,确定与该候选数据的类型相匹配的目标服务节点;所述目标服务节点对应有匹配该类型候选数据的处理规则;
调用所述目标服务节点对该候选数据进行处理,得到所述待使用数据;其中,所述服务节点基于对应的处理规则对该候选数据进行处理。
6.根据权利要求5所述的数据处理方法,其特征在于,所述目标服务节点对应有多个分支服务节点;所述针对每种类型的候选数据,确定与该候选数据的类型相匹配的目标服务节点,包括:
针对每种类型的候选数据,根据该候选数据的容量,以及每个所述分支服务节点对应的最大处理容量,将该候选数据分配给与该候选数据的类型相匹配的目标服务节点下的多个分支服务节点。
7.一种数据处理装置,其特征在于,所述数据处理装置包括:
获取模块,用于获取来自数据源端的多种类型的候选数据;
数据处理模块,用于针对每种类型的候选数据,确定与该候选数据的类型相匹配的处理规则,并基于所述处理规则对所述候选数据进行处理,得到处理后的待使用数据;
选取模块,用于基于所述待使用数据对应的目的端,选取与所述目的端相匹配的数据文件配置模板;
生成模块,用于根据所述数据文件配置模板以及所述待使用数据,生成对应于所述目的端的数据文件,并将生成的所述数据文件发送给所述目的端。
该专利技术资料仅供研究查看技术是否侵权等信息,商用须获得专利权人授权。该专利全部权利属于北京开科唯识技术股份有限公司,未经北京开科唯识技术股份有限公司许可,擅自商用是侵权行为。如果您想购买此专利、获得商业授权和技术合作,请联系【客服】
本文链接:http://www.vipzhuanli.com/pat/books/202011018410.0/1.html,转载请声明来源钻瓜专利网。