[发明专利]数据处理方法及装置、存储介质、计算设备有效
申请号: | 202111327567.6 | 申请日: | 2021-11-10 |
公开(公告)号: | CN113901008B | 公开(公告)日: | 2022-09-27 |
发明(设计)人: | 怀朋;陆云 | 申请(专利权)人: | 上海意略明数字科技股份有限公司 |
主分类号: | G06F16/172 | 分类号: | G06F16/172;G06F9/50 |
代理公司: | 北京集佳知识产权代理有限公司 11227 | 代理人: | 骆苏华 |
地址: | 200001 上海市*** | 国省代码: | 上海;31 |
权利要求书: | 查看更多 | 说明书: | 查看更多 |
摘要: | |||
搜索关键词: | 数据处理 方法 装置 存储 介质 计算 设备 | ||
1.一种数据处理方法,其特征在于,所述方法包括:
接收多个数据处理请求,所述多个数据处理请求来自一个或多个用户设备组,每个数据处理请求用于请求对请求设备组发送的待处理数据进行处理,所述请求设备组为发送该数据处理请求的用户设备组;
创建多个请求文件,所述请求文件与所述数据处理请求一一对应,每个请求文件包括与该请求文件对应的数据处理请求的内容信息,其中,所述内容信息为所述数据处理请求所请求处理的待处理数据或所述待处理数据的数据信息;
分多次从所述多个请求文件获取所述内容信息,并对每次获取的内容信息进行缓存;
将缓存的内容信息发送至多个执行终端,以使所述多个执行终端对当前可处理数据进行处理并得到处理结果,其中,所述当前可处理数据为所述缓存的待处理数据或缓存的数据信息对应的待处理数据;
其中,所述多个请求文件存储在服务器的内存以外的外部存储器,预先设置有第一线程和第二线程,且预先设置有第一胶囊和第二胶囊,所述第一线程用于维护所述第一胶囊,所述第二线程用于维护所述第二胶囊,所述胶囊是指内存中预先设置的数据结构;
第i次获取的内容信息通过所述第一线程写入所述第一胶囊中,并缓存在所述第一胶囊中;
当通过所述第一线程将所述第一胶囊中缓存的内容信息发送给所述多个执行终端时,通过所述第二线程进行第i+1次的获取内容信息并写入所述第二胶囊中;
当所述第一胶囊中缓存的内容信息被消耗完毕,通过所述第二线程将所述第二胶囊中缓存的内容信息发送给所述执行终端,其中,将缓存的内容信息消耗完毕是指缓存的内容信息发送完成;
将所述第二胶囊中缓存的内容信息发送给所述执行终端时,通过所述第一线程获取新的内容信息并缓存在所述第一胶囊中,当第二胶囊中缓存的内容信息被消耗完毕,开始消耗所述第一胶囊中的内容信息,其中,i≥1且i为正整数。
2.根据权利要求1所述的数据处理方法,其特征在于,所述请求文件还包括与该请求文件对应的数据处理请求的请求信息,所述请求信息包括:所述请求设备组的标识、请求时间和所述数据处理请求所请求处理的待处理数据的数量,所述请求时间为所述请求设备组发送所述数据处理请求的时间。
3.根据权利要求2所述的数据处理方法,其特征在于,每一请求文件的文件名为该请求文件对应的数据处理请求的请求信息。
4.根据权利要求2所述的数据处理方法,其特征在于,每次从所述多个请求文件中获取所述内容信息之前,所述方法还包括:
获取多个请求文件的请求信息;
根据所述请求时间确定每个请求文件中本次被获取的内容信息的数量。
5.根据权利要求2所述的数据处理方法,其特征在于,每次从所述多个请求文件中获取所述内容信息之前,所述方法还包括:
根据所述请求信息,确定所述请求设备组的数量,其中,每个请求设备组对应至少一个请求文件;
确定各个请求设备组的权重;
根据所述请求设备组的权重和预设的数量阈值确定各个请求设备组的席位数量,所述席位数量为所述请求设备组对应的至少一个请求文件中本次被获取的内容信息的总数量;
针对每个请求设备组对应的至少一个请求文件,根据所述请求时间确定出总数量等于所述席位数量的内容信息。
6.根据权利要求5所述的数据处理方法,其特征在于,确定各个请求设备组的权重包括:
根据每个请求设备组对应的至少一个请求文件中最早的请求时间确定该请求设备组的优先级,其中,所述最早的请求时间越早,所述优先级越高;
根据每个请求设备组的优先级和所述请求设备组的数量确定该请求设备组的权重,其中,所述优先级越高,所述权重越大。
7.根据权利要求5所述的数据处理方法,其特征在于,根据所述请求时间确定出总数量等于所述席位数量的内容信息包括:
对于每个请求设备组对应的至少一个请求文件,按照所述请求时间的先后顺序,依次将每个请求文件中未被获取过的内容信息作为该请求文件中本次被获取的内容信息,直到确定出的内容信息的数量达到该请求设备组的席位数量为止。
该专利技术资料仅供研究查看技术是否侵权等信息,商用须获得专利权人授权。该专利全部权利属于上海意略明数字科技股份有限公司,未经上海意略明数字科技股份有限公司许可,擅自商用是侵权行为。如果您想购买此专利、获得商业授权和技术合作,请联系【客服】
本文链接:http://www.vipzhuanli.com/pat/books/202111327567.6/1.html,转载请声明来源钻瓜专利网。