[发明专利]一种非规则流中高维数据流的GPU处理方法

摘要

本发明公开了一种非规则流中高维数据流的GPU处理方法，属于高维数据流的处理方法，采用基于GPU的数据流并行计算模型对数据源的非规则流中高维数据流进行并行计算处理，处理后传给客户端；CPU主机是逻辑判断和控制的核心，并负责串行计算；概要数据结构的全部或者部分转移到GPU设备的显存中；当客户端提出查询请求时，CPU主机负责调用GPU设备的内核程序，在GPU设备显存中的概要数据结构上执行查询算法内核，并将查询结果返回CPU主机，最后再由CPU主机将结果转换为可读的最终查询结果返回给客户端。本发明能够在线精确地识别同步滑动窗口模式下高维数据流之间的相关性，具有显著的速度优势，很好地满足了高维数据流的实时性需求。

主权项

一种非规则流中高维数据流的GPU处理方法，其特征在于采用基于GPU的数据流并行计算模型对数据源的非规则流中高维数据流进行并行计算处理，处理后传给客户端；基于GPU的数据流并行计算模型包括CPU主机和GPU设备，CPU主机是逻辑判断和控制的核心，并负责串行计算；计算密集和数据密集的部分转移到GPU设备上计算，将概要数据结构的全部或者部分转移到GPU设备的显存中；CPU主机负责从流数据源端获取数据，对数据进行流速率调节，属性包装和数据过滤，进而进行缓冲，根据流速率调节后的情况，CPU主机调度将负责负载平衡和决定何时启动GPU设备；在GPU设备上，负责存储数据流的概要数据结构，并不断将数据流转换为概要数据结构，实时处理新流入的数据流，过期的数据流将在GPU设备的显存上直接抛弃；当客户端提出查询请求时，CPU主机负责调用GPU设备的内核程序，在GPU设备显存中的概要数据结构上执行查询算法内核，并将查询结果返回CPU主机，最后再由CPU主机将结果转换为可读的最终查询结果返回给客户端。