[发明专利]一种线上服务系统、数据加载方法、装置及设备

摘要

本发明实施例提供了一种线上服务系统、数据加载方法、装置及设备，所述系统包括：数据库、线上服务器和kafka服务器，其中kafka服务器为：基于kafka架构的服务器。本发明实施例通过将运营商或用户上传的数据分别存储到数据库和kafka服务器中，线上服务器在相邻两次从数据库获得全量数据的时间间隔内，从kafka服务器中实时获取增量数据，基于此能够将增量数据及时的同步到线上服务器中。

主权项

一种线上服务系统，其特征在于，所述系统包括：数据库、线上服务器和kafka服务器，所述kafka服务器为：基于kafka架构的服务器；所述数据库，用于获得并存储所述线上服务系统为用户提供数据服务所需的数据；所述线上服务器，用于按照预设的时间间隔，从所述数据库获得所述线上服务器对应的全量数据，并在满足增量数据加载条件的情况下，确定所述线上服务器所存储数据中最新一条数据的存储时间点，从所述kafka服务器加载目标增量数据，其中，所述目标增量数据为：所述kafka服务器在所述存储时间点之后存储、且与所述线上服务器对应的数据；所述kafka服务器，用于获得并缓存所述线上服务系统为用户提供数据服务所需的数据，获得所述存储时间点，并根据所述存储时间点，从自身存储的数据中确定所述目标增量数据，向所述线上服务器反馈所述目标增量数据。