[发明专利]数据读取方法、系统、设备以及可读存储介质

说明书

本公开的实施例提供了一种数据读取方法、系统、设备以及可读存储介质。应用于数据读取领域；该方法包括：根据数据读取任务中的强制更新参数判断缓冲文件是否需要强制更新；若所述缓冲文件不需要强制更新，则根据所述数据读取任务中的读取参数生成数据索引；根据所述数据索引查找对应的缓冲文件，若所述对应的缓冲文件存在，则读取所述对应的缓冲文件中的数据；将读取到的所述对应的缓冲文件中的数据进行目标格式转换，得到目标数据。以此方式，能够在不需要配置账号的情况下，最大简化开发的过程，优化了数据共享过程，既保证数据的实时同步，又保证了数据读取时速度基本达到本地文件读取水平。

技术领域

本公开涉及互联网领域，尤其涉及数据读取领域。

背景技术

数据共享的机制很多，包括共享文件夹，Git共享，在线云共享等，但是这些共享方式在数据使用的过程中都需要将数据下载到本地，受制于网络环境，而且下载通常是一个耗时或不可靠的操作，即使使用Git这样的管理方法，也需要配置账号密码等内容。

因此，目前急需一种数据共享方法，可以在不需要配置账号的情况下，最大简化开发的过程，优化数据共享过程。

发明内容

本公开提供了一种数据读取方法、系统、设备以及可读存储介质。

根据本公开的第一方面，提供了一种数据读取方法，该方法包括：

根据数据读取任务中的强制更新参数判断缓冲文件是否需要强制更新；

若所述缓冲文件不需要强制更新，则根据所述数据读取任务中的读取参数生成数据索引；

根据所述数据索引查找对应的缓冲文件，若所述对应的缓冲文件存在，则读取所述对应的缓冲文件中的数据；

将读取到的所述对应的缓冲文件中的数据进行目标格式转换，得到目标数据。

在第一方面的一些实现方式中，所述读取参数包括：输入文件、输入路径以及读取次数。

在第一方面的一些实现方式中，所述方法还包括：

若所述缓冲文件需要强制更新，则通过数据远程获取方法进行数据读取；

若所述对应的缓冲文件不存在，则通过所述数据远程获取方法进行数据读取；

若读取到的所述对应的缓冲文件中的数据格式转换失败，则通过所述数据远程获取方法重新进行数据读取。

在第一方面的一些实现方式中，所述方法还包括：

将通过所述数据远程获取方法读取到的数据缓冲至本地，并将缓冲至本地的数据进行目标格式转换，得到目标数据。

在第一方面的一些实现方式中，所述数据远程获取方法包括：网络文件数据读取、云接口数据读取以及数据库数据读取。

在第一方面的一些实现方式中，所述网络文件数据读取包括：将URL作为数据索引，根据所述数据索引获取对应的网络文件数据；

所述云接口数据读取包括：将对应的接口地址以及参数作为数据索引，根据所述数据索引获取对应的云接口数据；

所述数据库数据读取包括：将数据库链接以及SQJ查询对应的MD5作为数据索引，根据所述数据索引获取对应的数据库数据。

根据本公开的第二方面，提供了一种数据读取系统，该系统包括：

判断模块，用于根据数据读取任务中的强制更新参数判断缓冲文件是否需要强制更新；

索引生成模块，用于若所述缓冲文件不需要强制更新，则根据所述数据读取任务中的读取参数生成数据索引；