[发明专利]数据统计周期切换方法、装置、设备及存储介质在审
| 申请号: | 202210584801.1 | 申请日: | 2022-05-27 |
| 公开(公告)号: | CN115080577A | 公开(公告)日: | 2022-09-20 |
| 发明(设计)人: | 张振华 | 申请(专利权)人: | 平安银行股份有限公司 |
| 主分类号: | G06F16/23 | 分类号: | G06F16/23;G06F16/2458;G06F16/21 |
| 代理公司: | 北京市京大律师事务所 11321 | 代理人: | 沈克琪 |
| 地址: | 518001 广东*** | 国省代码: | 广东;44 |
| 权利要求书: | 查看更多 | 说明书: | 查看更多 |
| 摘要: | |||
| 搜索关键词: | 数据 统计 周期 切换 方法 装置 设备 存储 介质 | ||
本发明涉及大数据领域,公开了一种数据统计周期切换方法、装置、设备及存储介质。该方法包括:当监听到终端发送的周期切换指令时,根据周期切换指令,对预置请求队列中对数据处理请求的处理进行线程切换;通过切换后的线程中,依次对数据处理请求对应的请求数据进行入库,并通过预置全局计数器对切换后的线程进行请求状态监控;获取全局计数器对应的请求状态的监控结果,并根据监控结果,判断全局计数器是否满足预置周期切换条件;若全局计数器满足周期切换条件时,将当前时间设置为当前周期的切换时间,并采用切换时间标记入库后的请求数据。本发明实现了数据统计过程中的统计周期实时切换,避免当前统计周期内的数据被遗漏入库。
技术领域
本发明涉及大数据领域,尤其涉及一种数据统计周期切换方法、装置、设备及存储介质。
背景技术
在某些统计场景,需要在业务请求不中断的情况下,在某个业务人员控制的时间点T做切换,T时间点之前接收的请求被划分为当前统计周期,T时间点之后的请求划分到新的统计周期,并生成当前统计周期的数据。
业内一般使用数据库中保存的请求时间来划分,在并发量大的时候,可能统计时还有部分请求时间属于当前统计周期的数据还未处理完入库,下个统计周期也会忽略,导致遗漏部分数据。即现有数据统计周期切换容易导致数据入库疏漏的问题。
发明内容
本发明的主要目的在于解决现有数据统计周期切换容易导致数据入库疏漏的技术问题。
本发明第一方面提供了一种数据统计周期切换方法,包括:当监听到终端发送的周期切换指令时,根据周期切换指令,对预置请求队列中对数据处理请求的处理进行线程切换;通过切换后的线程中,依次对数据处理请求对应的请求数据进行入库,并通过预置全局计数器对切换后的线程进行请求状态监控;获取全局计数器对应的请求状态的监控结果,并根据监控结果,判断全局计数器是否满足预置周期切换条件;若全局计数器满足周期切换条件时,将当前时间设置为当前周期的切换时间,并采用切换时间标记入库后的请求数据。
可选的,在本发明第一方面的第一种实现方式中,在当监听到终端发送的周期切换指令时,根据周期切换指令,对预置请求队列中对数据处理请求的处理进行线程切换之后,还包括:获取新的数据处理请求,并判断新的数据处理请求是否满足预置预处理条件;若满足,通过预置第一线程,获取新的数据处理请求对应的请求数据,并将新的数据处理请求对应的请求数据存储至预置临时数据表中;若不满足,则返回新的数据处理请求对应的处理异常提示信息。
可选的,在本发明第一方面的第二种实现方式中,当监听到终端发送的周期切换指令时,根据周期切换指令,对预置请求队列中对数据处理请求的处理进行线程切换包括:当监听到终端发送的周期切换指令时,并解析周期切换指令,得到处理预置请求队列中数据处理请求的第二线程对应的内存地址;根据内存地址,查找对应的寄存器,并更新寄存器中的线程指针和寄存器指针,以对数据处理请求的处理进行线程切换。
可选的,在本发明第一方面的第三种实现方式中,通过预置全局计数器对切换后的线程进行请求状态监控包括:通过预置全局计数器,监控切换后的线程中的各个状态监控因子,并统计各状态监控因子对应的计数;基于统计各状态监控因子对应的计数生成全局计数器监控切换后的线程对应的全局变量;根据全局变量,利用全局计数器对切换后的线程进行请求状态监控。
可选的,在本发明第一方面的第四种实现方式中,不同类型的状态监控因子包括第一因子、第二因子和第三因子,通过预置全局计数器,监控切换后的线程中的各个状态监控因子,并统计各状态监控因子对应的计数包括:通过预置全局计数器,监控切换后的线程中数据处理请求的数量,并根据数据处理请求的数量,确定第一因子对应的计数;通过全局计数器,监测切换后的线程中数据处理请求对应的请求数据是否入库成功;若入库成功,则调整第二因子对应的计数;通过全局计数器,监控切换后的线程中数据处理请求是否处理异常;若处理异常,则调整第三因子对应的计数。
该专利技术资料仅供研究查看技术是否侵权等信息,商用须获得专利权人授权。该专利全部权利属于平安银行股份有限公司,未经平安银行股份有限公司许可,擅自商用是侵权行为。如果您想购买此专利、获得商业授权和技术合作,请联系【客服】
本文链接:http://www.vipzhuanli.com/pat/books/202210584801.1/2.html,转载请声明来源钻瓜专利网。
- 数据显示系统、数据中继设备、数据中继方法、数据系统、接收设备和数据读取方法
- 数据记录方法、数据记录装置、数据记录媒体、数据重播方法和数据重播装置
- 数据发送方法、数据发送系统、数据发送装置以及数据结构
- 数据显示系统、数据中继设备、数据中继方法及数据系统
- 数据嵌入装置、数据嵌入方法、数据提取装置及数据提取方法
- 数据管理装置、数据编辑装置、数据阅览装置、数据管理方法、数据编辑方法以及数据阅览方法
- 数据发送和数据接收设备、数据发送和数据接收方法
- 数据发送装置、数据接收装置、数据收发系统、数据发送方法、数据接收方法和数据收发方法
- 数据发送方法、数据再现方法、数据发送装置及数据再现装置
- 数据发送方法、数据再现方法、数据发送装置及数据再现装置





