|
钻瓜专利网为您找到相关结果 2527481个,建议您 升级VIP下载更多相关专利
- [发明专利]一种数据集处理方法及装置-CN202210226206.0在审
-
赖恒宇;李柏超
-
北京爱笔科技有限公司
-
2022-03-07
-
2022-06-07
-
G06F9/54
- 本申请公开了一种数据集处理方法及装置,在处理目标数据集时,可以获取目标数据集的下载列表,下载列表包括数据信息和下载地址,数据信息用于标识对目标数据集切片处理得到的切片数据;启动子线程,当数据存储空间具有一定大小的存储余量时,通过子线程根据下载地址下载待下载切片数据,并将已完成下载的待下载切片数据的数据信息推送到消息队列;当检测到消息队列中存储有数据信息时,通过主线程从消息队列获取目标数据信息,根据该目标数据信息读取并处理目标切片数据可见,采用双线程方式,使得负责数据处理的主线程只需等待一个切片数据的下载时间,即可开始数据处理业务,由此实现数据下载和数据处理同步进行,提高数据集的处理效率。
- 一种数据处理方法装置
|