[发明专利]实时数据的分页查询系统及方法

说明书

本发明实施例涉及大数据技术领域，尤其涉及公开一种实时数据的分页查询系统及方法。该系统包括：客户端节点、业务节点以及至少两个分布式部署的数据节点；业务节点配置为响应客户端节点发送的分页查询请求，向数据节点发送与数据节点匹配的分页查询请求；数据节点配置为响应业务节点发送的分页查询请求，通过分页查询适配器取出符合查询条件的数据记录并返回给业务节点；业务节点还配置为通过部署的分页查询整合器对不同数据节点返回的符合分页查询条件的数据记录进行排序整合，得到分页查询的查询结果记录返回给客户端节点。采用本申请方案支持作分页查询以满足大数据量查询和展示的要求，且满足高效率和低成本的要求，达到实时数据查询的效果。

技术领域

本发明实施例涉及大数据技术领域，尤其涉及一种实时数据的分页查询系统及方法。

背景技术

随着软件技术的发展和软件应用的普及，软件功能越来越多，用户使用的软件在技术实现上往往是一个分布式系统。例如在一些场景下，用户要求查询数据，可能分布在不同物理系统，而且因为查询的数据量太大不能一次性返还给客户，否则会导致交易时间过长；或者，返回的数据超出缓存空间或者通讯报文长度限制，所以查询就需要作分页查询，即每次只查询返还一页的数据给客户，客户需要继续查询下一页的数据时，再作下一次的查询交易。因此针对用户实时使用软件的场景，如何保证查询能实时返回，尽可能避免查询延迟问题同时尽可能降低系统开销和性能变得尤为重要。

发明内容

本发明实施例中提供了一种实时数据的分页查询系统及方法，以实现既能支持作分页查询以满足大数据量查询和展示的要求，且又能满足高效率和低成本的查询要求。

第一方面，本发明实施例中提供了一种实时数据的分页查询系统，包括：客户端节点、业务节点以及至少两个分布式部署的数据节点，所述业务节点上部署有分页查询整合器，所述数据节点上部署有分页查询适配器；其中：

所述业务节点配置为，响应客户端节点发送的分页查询请求，向数据节点发送与所述数据节点匹配的分页查询请求；

所述数据节点配置为，响应所述业务节点发送的分页查询请求，通过分页查询适配器取出符合查询条件的数据记录，并返回给所述业务节点；

所述业务节点还配置为，通过部署的分页查询整合器对不同数据节点返回的符合分页查询条件的数据记录进行排序整合，得到分页查询的查询结果记录返回给客户端节点。

第二方面，本发明实施例中还提供了一种实时数据的分页查询方法，所述方法包括：

业务节点响应客户端节点发送的分页查询请求，向数据节点发送与所述数据节点匹配的分页查询请求；所述业务节点上部署有分页查询整合器，所述数据节点上部署有分页查询适配器；

所述数据节点响应所述业务节点发送的分页查询请求，通过本地预先部署的分页查询适配器取出符合查询条件的数据记录，并返回给所述业务节点；

所述业务节点还通过部署的分页查询整合器对不同数据节点返回的符合分页查询条件的数据记录进行排序整合，得到分页查询的查询结果记录返回给客户端节点。

根据本发明实施例中提供的实时数据的分页查询系统，在业务节点增加分页查询整合器，在数据节点中增加分页查询适配器，各个数据节点可以通过部署的分页查询适配器取出符合条件的数据记录返回至业务节点，而业务节点可以通过分页查询整合器对各个数据节点取出的数据进行排序整合后返回至客户端节点，不需要额外增加中间物理节点先对不同数据节点的数据作异步数据缓存和整合，只需要增加相应的软件系统，可直接访问多个数据节点同时从分布式的异构系统中实时查询数据并进行排序，支持作分页查询以满足大数据量查询和展示的要求，且满足高效率和低成本的要求，达到实时数据查询的效果。

上述发明内容仅是本发明技术方案的概述，为了能够更清楚了解本发明的技术手段，而可依照说明书的内容予以实施，并且为了让本发明的上述和其它目的、特征和优点能够更明显易懂，以下特举本发明的具体实施方式。