[发明专利]数据处理系统

权利要求书

1.一种数据处理系统，包括构成异构计算的第一处理器和第二处理器，其特征在于，所述第二处理器包括多个并行处理所述第一处理器的原始数据库表数据、且均连接内存控制器的计算单元；

每个计算单元均包括以流水作业方式运行、且均具备独立缓存资源的读取组件、表数据处理组件和写组件；

所述读取组件，用于读取所述第一处理器的数据库对应的表描述符、过滤条件码流及待处理表数据；所述表描述符用于记载数据库表的各列存储对齐方式和各列长度信息；

所述表数据处理组件，用于基于所述表描述符，依次确定所述待处理表数据的每个行列的位置信息，并根据所述过滤条件码流和各行列的位置信息对所述待处理表数据的每一行进行过滤操作；

所述写组件，用于将汇总所述表数据处理组件的运算结果，写入至所述第二处理器的内存中。

2.根据权利要求1所述的数据处理系统，其特征在于，所述表描述符包括第一字段和第二字段，所述第一字段用于表示当前列对应的存储对齐方式，以使不同数据类型的数据按照对应的存储对齐方式存储至相应位宽的内存中；所述第二字段用于表示所述当前列的定义长度；

若所述当前列对应的数据类型为定长数据，则所述当前列的定义长度为所述当前列的实际列长度，若所述当前列对应的数据类型为变长数据，所述当前列的定义长度为预设值，则所述当前列的实际列长度存储在数据头部。

3.根据权利要求1所述的数据处理系统，其特征在于，所述读取组件包括读取配置模块和读取数据模块，所述表数据处理组件包括行列解析模块和过滤模块；

所述读取数据模块的接口、所述行列解析模块的接口、所述过滤模块的接口和所述写组件的接口均单独分配独立的RAM内存；

所述读取数据模块，用于将从对应内存中读取的所述待处理表数据，交替存放在数据ping/pong缓存；

所述行列解析模块，用于交替从所述数据ping/pong缓存读取目标表数据，依次解析所述目标表数据页面中的每一行，计算每一行中所需查询的列在当前页面中的偏移，并将相应结果交替存放在行位置ping/pong缓存、行长度ping/pong缓存、列位置ping/pong缓存、列长度ping/pong缓存，同时交替复制页面数据到页面ping/pong缓存；

所述过滤模块，用于根据过滤条件，交替从所述行列解析模块的缓存中读取所需数据进行过滤运算，并将过滤结果交替写入至过滤行位置ping/pong缓存和过滤行位置pong/pong缓存。

4.根据权利要求3所述的数据处理系统，其特征在于，所述读取配置模块、所述读取数据模块，所述行列解析模块、所述过滤模块和所述写组件分别配置不同的数据位宽进行数据访问。

5.根据权利要求4所述的数据处理系统，其特征在于，每个计算单元具备独立的HBM存储空间，且每个计算单元均单独与第一HBM控制器和第二HBM控制器相连；

各计算单元通过所述第一HBM控制器从相应的HBM存储空间中读取目标原始数据库表数据，通过所述第二HBM控制器将所述运算结果写入至相应的HBM存储空间中。

6.根据权利要求1至5任意一项所述的数据处理系统，其特征在于，所述表数据处理组件包括多个并行处理通道，以使所述表数据处理组件、所述读取组件和所述写组件的数据处理速度相匹配；

各并行处理通道用于同时从所述读取组件中读取所述待处理表数据的各数据块，并同时对读取的数据块进行相应处理。