[发明专利]金融数据的处理方法、装置、设备及存储介质

说明书

本发明涉及金融数据处理领域，公开了一种金融数据的处理方法、装置、设备及存储介质。该方法包括：获取N个数据库的金融数据，得到金融数据集；队列判断金融数据是否满足预置主校验格式；若不满足，则查询子校验格式，判断金融数据是否满足子校验格式；若满足，则将金融数据标记为填充日志消息队列数据；若不满足，则对金融数据进行修复处理，得到金融数据，将修复的金融数据标记为校验日志消息队列数据；若满足，则将金融数据传输标记为填充消息队列的数据；基于填充消息队列，对金融数据进行队列填充处理，得到填充金融数据；将填充金融数据传输标记为合并消息队列的数据；对合并消息队列所有的填充金融数据进行合并处理，得到处理结果数据。

技术领域

本发明涉及金融数据处理领域，尤其涉及一种金融数据的处理方法、装置、设备及存储介质。

背景技术

私募基金是指以非公开方式向特定投资者募集资金并以特定目标为投资对象的证券投资基金。私募基金是以大众传播以外的手段招募，发起人集合非公众性多元主体的资金设立投资基金，进行证券投资。私募数据指的是和私募基金相关的数据，包括基金净值、基金产品、基金经理和基金公司等数据。多数据源为了保证私募数据的有效性和及时性，需要从多方数据源中获取私募基金数据，然后将其聚合处理，形成最终的数据。流式处理是一种数据处理方式，因为数据就像是流水一样，接收到什么数据就处理什么数据，所以叫做流式处理方式。

现有的多数据源处理技术，往往采用定时拉取目标数据的方法，在一个主流程中硬编码各种数据源的处理方式，灵活度不高。并且因为在同一个流程中加入了多个不同的处理逻辑，导致业务逻辑复杂，可维护性不高。

发明内容

本发明的主要目的在于解决金融领域中多数据源的处理过程，维护性不高和灵活度较差的技术问题。

本发明第一方面提供了一种金融数据的处理方法，包括步骤：

获取N个数据库的金融数据，根据预置数据库排序，对所述N个数据库对应的金融数据进行排序组合处理，得到金融数据集，其中，N为正整数；

基于预置校验消息队列，队列判断所述金融数据集中的金融数据是否满足预置主校验格式；

若不满足主校验格式，则查询外接的子校验格式，判断所述金融数据是否满足所述外接的子校验格式；

若满足外接的子校验格式，则将所述金融数据标记为预置填充消息队列的数据；

若不满足外接的子校验格式，则对所述金融数据进行修复处理，得到修复的金融数据，将所述修复的金融数据标记为所述校验消息队列的数据；

若满足主校验格式，则将所述金融数据传输标记为预置填充消息队列的数据；

基于所述填充消息队列，对所述金融数据进行队列填充处理，得到填充金融数据；

将所述填充金融数据传输标记为预置合并消息队列的数据；

根据预置合并触发算法，对所述合并消息队列所有的填充金融数据进行合并处理，得到处理结果数据。

可选的，在本发明第一方面的第一种实现方式中，所述对所述金融数据进行修复处理，得到修复的金融数据包括：

对所述金融数据进行修复处理，得到修复中转数据和修复结果；

判断所述修复结果是否为修复成功；

若不为修复成功，则将所述修复中转数据标记为丢弃状态，停止处理所述修复中转数据；

若为修复成功，则将所述修复中转数据确定为修复的金融数据。

可选的，在本发明第一方面的第二种实现方式中，在所述获取N个数据库的金融数据，根据预置数据库排序，对所述N个数据库对应的金融数据进行排序组合处理，得到金融数据集之前，还包括：