[发明专利]一种数据存在性校验的方法及设备

说明书

本申请的目的是提供一种数据存在性校验的方法及设备，本申请通过对位图缓存的字段标注位图缓存注解，并在业务系统中引入数据存在性校验组件；基于业务系统的启动操作，通过所述数据存在性校验组件扫描所有标注了位图缓存注解的业务字段；基于扫描到的业务字段从分布式缓存中间件中查询所述业务字段对应的位图缓存，将查询到的位图缓存反射注入到对应的标注位图缓存注解的业务字段中；根据经过反射注入后的位图缓存对获取到的用户访问请求进行数据存在性校验。从而降低实现成本的同时，避免额外的网络开销对接接口整体性能、稳定带来的负面影响。

技术领域

本申请涉及计算机领域，尤其涉及一种数据存在性校验的方法及设备。

背景技术

在高性能接口要求的业务场景中，存在大量数据是否存在的校验场景，比如：用户是否是新用户、活动是否存在、商家是否存在等。从接口性能及数据存储空间成本考虑，一般采用采用位图(bitmap)数据结构进行数据存储来实现满足访问、存储上的高标准要求。通常实现方式包括本地位图缓存和分布式位图缓存两种，但是本地位图缓存实现成本高，由于是在本地维护位图缓存，源数据发生新增、变更时需要单独接入MQ进行集群间的位图缓存数据同步；而分布式位图缓存由于业务容器与缓存中间件之间存在一层网络开销，存在网络抖动造成的毛刺情况，不适合用于高并发高性能要求的场景。

发明内容

本申请的一个目的是提供一种数据存在性校验的方法及设备，解决现有技术中实现成本高、需要额外的网络开销对接口整体性能和稳定带来负面影响的问题。

根据本申请一个方面，提供了一种数据存在性校验的方法，该方法包括：

对位图缓存的字段标注位图缓存注解，并在业务系统中引入数据存在性校验组件；

基于业务系统的启动操作，通过所述数据存在性校验组件扫描所有标注了位图缓存注解的业务字段；

基于扫描到的业务字段从分布式缓存中间件中查询所述业务字段对应的位图缓存，将查询到的位图缓存反射注入到对应的标注位图缓存注解的业务字段中；

根据经过反射注入后的位图缓存对获取到的用户访问请求进行数据存在性校验。

可选地，对位图缓存的字段标注位图缓存注解，包括：

对需要支持业务校验的位图缓存的数据进行本地存储，将在本地存储的位图缓存的字段标注位图缓存注解。

可选地，基于业务系统的启动操作，通过所述数据存在性校验组件扫描所有标注了位图缓存注解的业务字段，包括：

基于业务系统的启动操作，加载业务的位图缓存到本地内存中；

通过所述数据存在性校验组件扫描所述本地内存中所有标注了位图缓存注解的业务字段。

可选地，基于扫描到的业务字段从分布式缓存中间件中查询所述业务字段对应的位图缓存，包括：

基于扫描到的业务字段向分布式缓存中间件发送查询请求，以使所述分布式缓存中间件基于所述查询请求从配置的业务数据中匹配所述业务字段对应的位图缓存，其中，所述配置的业务数据由业务管理台应用同步至分布式缓存中间件中，包括业务的位图缓存。

可选地，所述方法包括：

当反射注入完成后，在所述数据存在性校验组件中启动位图缓存变更监听任务；

基于所述监听任务监听到的变更事件重新查询新的位图缓存，并反射注入到对应标注位图缓存注解的业务字段中。

可选地，基于所述监听任务监听到的变更事件重新查询新的位图缓存，包括：

基于业务管理台应用同步至分布式缓存中间件的业务数据发生的变更，调整所述分布式缓存中间件中的对应的位图缓存的变更状态；