[发明专利]一种高并发下存储大数据的分片及聚合控制方法

权利要求书

1.一种高并发下存储大数据的分片及聚合控制方法，其特征在于，包括以下：

(1).配置平台，配置需要切片的指标的分片单位：

分片是取整计算，每笔数据进入统计时都有其自带业务属性的时间戳，这个时间戳是一个Long类型的数据，然后定义切片单位为毫秒，秒，分钟，小时，天，则这些时间单位对应的时间跨度分别是1，1000，60000，360000，86400000，然后时间跨度(分片)duration＝入参时间戳/切片单位，则每个duration都是整个时间跨度的一部分，且各个duration都不相交；

(2).2.数据切割分片：

数据流进入系统时，先判断是否需要分片，如果需要分片，则先计算出所属切片的值sort，然后以维度_真实数据_切片单位为缓存的key，先判断该key下面的该切片是否存在，不存在就新建，存在就merge新的的值，zset一个所属切片的值，排序为sort；

(3).高并发下merge值：

高并发下每次从缓存中取数可能不一样，造成数据失真；这里提供一种快照加自旋锁的方法，确保数据一致，并减少数据计算等待时间。