[发明专利]哈希分区加速器有效
申请号: | 201711469302.3 | 申请日: | 2017-12-28 |
公开(公告)号: | CN108196662B | 公开(公告)日: | 2021-03-30 |
发明(设计)人: | 吴林阳;郭雪婷;陈云霁 | 申请(专利权)人: | 中国科学院计算技术研究所 |
主分类号: | G06F1/3234 | 分类号: | G06F1/3234;G06F9/38;G06F9/50 |
代理公司: | 中科专利商标代理有限责任公司 11021 | 代理人: | 任岩 |
地址: | 100190 北*** | 国省代码: | 北京;11 |
权利要求书: | 查看更多 | 说明书: | 查看更多 |
摘要: | |||
搜索关键词: | 分区 加速器 | ||
一种哈希分区加速器,配置为集成于内存上,用于加速处理哈希连接分区阶段,哈希分区加速器包括:哈希单元,用于从内存中读取分块的关系表中多个元组,然后并行的处理多个元组的键,产生多个哈希索引;直方图单元,用于根据多个哈希索引,并行的更新存储在直方图单元中直方图数据的多个副本,并更新后的各副本整合为数据一致性的直方图数据表单;混排单元(Shuffle unit),用于依据多个哈希索引,确定各元组存储于目标数组中的位置,将关系表中的元组复制到目标数组,实现对关系表的划分。本公开的加速器通过在通过内存端加速,使分区阶段的总能量消耗得到显著缓解。
技术领域
本公开涉及计算机系统领域,进一步涉及一种哈希分区加速器。
背景技术
在设计现代计算机系统时首先要考虑的因素是能耗。为了提高能效,如现场可编程门阵列(FPGA),图形处理器(GPU)和定制加速器一类的硬件加速器已被广泛应用于工业领域。随着靠近数据的处理技术的出现,将硬件加速器集成到动态随机存取存储器(DRAM)堆栈中以降低数据移动的成本成为一种新的系统设计思路。其基本思想是利用3D堆叠技术,将一些包含加速器的逻辑die和多个DRAM die垂直集成到一个芯片中。然而,由于3D堆叠DRAM的面积、功耗、散热和制造等方面的限制,能够集成到DRAM中的加速器的数量和类型是有限的。因此,给定一个加速的目标应用程序,确定其中哪些部分最适合在DRAM中加速是至关重要的。
发明内容
有鉴于此,本公开的目的在于提供一种哈希分区加速器,以解决以上所述的至少部分技术问题。
本公开提供一种哈希分区加速器,配置为集成于内存上,用于加速处理哈希连接分区(partition)阶段,该哈希分区加速器包括:
哈希单元(hash unit),用于从内存中读取分块的关系表中多个元组,然后并行的处理所述多个元组的键,产生多个哈希索引;
直方图单元(histogram unit),用于根据所述多个哈希索引,并行的更新存储在该直方图单元中直方图数据的多个副本,并更新后的各副本整合为数据一致性的直方图数据表单;
混排单元(Shuffle unit),用于依据所述多个哈希索引,确定各元组存储于目标数组中的位置,将关系表中的元组复制到目标数组,实现对关系表的划分。
在进一步的实施方案中,所述内存为3D堆叠DRAM,该哈希分区加速器配置为集成到3D堆叠DRAM的逻辑层上。
在进一步的实施方案中,所述哈希单元包括多个并行处理单元,分别用于处理各元组的键,产生各元组对应的哈希索引。
在进一步的实施方案中,还包括与所述并行处理单元相同数量的多路选择器,连接于各并行处理单元后端,用于选择哈希索引的输出为直方图单元或者混排单元。
在进一步的实施方案中,所述直方图单元包括并行增量单元,分别用于根据所述多个哈希索,并行的更新各直方图数据的副本。
在进一步的实施方案中,所述直方图单元包括与多个第一本地存储器,用于存储更新前和更新后的直方图数据的各个副本;优选的,所述副本数量为16,相对应的第一本地存储器数量为16。
在进一步的实施方案中,所述直方图单元还包括规约单元,用于将各自第一本地存储器的更新后表单整合为数据一致性的表单。
在进一步的实施方案中,所述混排单元包括:多个并行的地址读取子单元:根据各所述哈希索引从目标地址数组中读取目标地址;冲突处理(DECONF)子单元,依据多个目标地址,对有冲突的目标地址,产生基于原始目标地址的偏移,同时也产生相同目标地址的计数值;分散(SCATTER)子单元,用于根据所述偏移和原始目标地址将元组移动到正确的位置,如无冲突则将元组移动至无偏移的目标地址;更新(UPDATE)子单元,根据所述计数值更新目标地址。
该专利技术资料仅供研究查看技术是否侵权等信息,商用须获得专利权人授权。该专利全部权利属于中国科学院计算技术研究所,未经中国科学院计算技术研究所许可,擅自商用是侵权行为。如果您想购买此专利、获得商业授权和技术合作,请联系【客服】
本文链接:http://www.vipzhuanli.com/pat/books/201711469302.3/2.html,转载请声明来源钻瓜专利网。
- 上一篇:一种具有信息保护功能智能型计算机
- 下一篇:一种人脸识别方法、移动终端