[发明专利]数据的获取方法、装置、存储介质及电子装置

说明书

本发明实施例提供了一种数据的获取方法、装置、存储介质及电子装置，其中，该方法包括：在确定达到数据采集条件的情况下，从SAP系统中采集目标起始时间之后所产生的目标数据，目标起始时间是基于上一次数据采集的截止时间所确定的；将目标数据写入目标队列中，以指示消费者从目标队列中获取目标数据，目标队列中包括至少一个单元，每个单元中包括至少一个分区。通过本发明，解决了相关技术中存在的数据获取的效率低的问题，进而达到了提高数据获取的效率的效果。

技术领域

本发明实施例涉及计算机技术领域，具体而言，涉及一种数据的获取方法、装置、存储介质及电子装置。

背景技术

在很多较传统的企业内，进销存业务都是严重依赖于SAP系统的，但近些年各行各业信息化进程逐年加速，很多企业都会雇佣员工或者开发商开发自己的业务系统，这些业务系统普遍使用开源组件数据库，例如mysql、postgresql、以及hive、kudu等大数据数仓，因此在企业想要进行一些自定义报表开发时就会出现诸多不便，例如，在从SAP系统中获取数据时容易出现因数据丢失或延迟等需要重新获取的问题，即相关技术中存在数据获取的效率低的问题。

针对相关技术中存在的数据获取的效率低的问题，目前尚未提出有效的解决方案。

发明内容

本发明实施例提供了一种数据的获取方法、装置、存储介质及电子装置，以至少解决相关技术中存在的数据获取的效率低的问题。

根据本发明的一个实施例，提供了一种数据的获取方法，包括：在确定达到数据采集条件的情况下，从SAP系统中采集目标起始时间之后所产生的目标数据，其中，所述目标起始时间是基于上一次数据采集的截止时间所确定的；将所述目标数据写入目标队列中，以指示消费者从所述目标队列中获取所述目标数据，其中，所述目标队列中包括至少一个单元，所述至少一个单元中的每个单元中包括至少一个分区。

在一个示例性实施例中，从SAP系统中采集目标起始时间之后所产生的目标数据包括：从目标数据库中获取第一时间值，其中，所述第一时间值是所述上一次数据采集的截止时间，且所述第一时间值在所述上一次数据采集截止时被存储至所述目标数据库中；将所述第一时间值确定为当前次数据采集的所述目标起始时间；将与所述当前次数据采集的所述目标起始时间间隔第一预定时间段之后的时间值确定为当前次数据采集的目标截止时间；将所述目标起始时间及所述目标截止时间作为所述当前次的目标调用参数；基于所述当前次的目标调用参数，从所述SAP系统中采集所述目标数据。

在一个示例性实施例中，从SAP系统中采集目标起始时间之后所产生的目标数据包括：从目标数据库中获取第一时间值，其中，所述第一时间值是所述上一次数据采集的截止时间，且所述第一时间值在所述上一次数据采集截止时被存储至所述目标数据库中；将所述第一时间值之前的并与所述第一时间值间隔第二预定时间段的时间值确定为当前次数据采集的所述目标起始时间；将与所述当前次数据采集的所述目标起始时间间隔第一预定时间段之后的时间值确定为当前次数据采集的目标截止时间；将所述目标起始时间及所述目标截止时间作为所述当前次的目标调用参数；基于所述当前次的目标调用参数，从所述SAP系统中采集所述目标数据。

在一个示例性实施例中，在确定达到数据采集条件的情况下，从SAP系统中采集目标起始时间之后所产生的目标数据包括：在确定达到数据采集条件的情况下，通过预设方式从所述SAP系统中采集所述目标起始时间之后所产生的目标数据集；对所述目标数据集进行解析，以得到预定格式的所述目标数据。

在一个示例性实施例中，通过预设方式从所述SAP系统中采集所述目标起始时间之后所产生的目标数据集包括以下至少之一：通过表方式从所述SAP系统中采集所述目标起始时间之后所产生的所述目标数据集；通过函数方式从所述SAP系统中采集所述目标起始时间之后所产生的所述目标数据集。