[发明专利]基于多核处理器的数据处理方法及相关产品

说明书

本披露公开了一种基于多核处理器的数据处理方法、多核处理器、芯片和板卡。该多核处理器可以作为计算装置包括在组合处理装置中，该组合处理装置还可以包括接口装置和其他处理装置。该计算装置与其他处理装置进行交互，共同完成用户指定的计算操作。组合处理装置还可以包括存储装置，该存储装置分别与计算装置和其他处理装置连接，用于存储该计算装置和其他处理装置的数据。本披露的方案基于多核处理器对排序处理进行优化，提高了运算处理效率。

技术领域

本披露一般地涉及数据处理领域。更具体地，本披露涉及一种基于多核处理器的数据处理方法、多核处理器、芯片和板卡。

背景技术

在数据处理过程中，通常需要在大量数据中选取满足条件的部分数据。例如，在神经网络运算中的TopK算子，需要选取k个(k为正整数)数值最大(或最小或满足其他不等式或其他数值上的约束)的数据或连同索引(index)进行输出。目前，主要以堆排序、快速排序、冒泡排序等排序算法为基础进行数据选取并输出，并且通常基于单个处理核来实现排序算法，数据处理效率较低。

随着硬件技术的发展，现代智能处理器多采用多核并行的框架。如何在多核并行框架中高效地解决大规模数据的诸如TopK一类的排序问题，有效地降低外部存储电路的访存开销，最大限度地提高数据的并行度，是目前数据处理领域急需解决的问题。

发明内容

为了至少解决如上所提到的一个或多个技术问题，本披露实施例提供了一种基于多核处理器的数据处理方法、多核处理器、芯片和板卡。

在第一方面中，本披露实施例提供了一种基于多核处理器的数据处理方法，所述多核处理器包括多个处理核，所述方法包括：

根据配置方案，调度一个或多个处理核对待处理数据执行排序处理，其中所述配置方案指示要使用的处理核数量和所述待处理数据的拆分方式，所述排序处理用于从所述待处理数据的指定的排序维度中筛选出满足第一预定条件的指定数量的数值；以及

根据所述配置方案，对所调度的一个或多个处理核返回的处理结果选择性进行后处理，以获得最终结果。

在第二方面中，本披露实施例提供了一种多核处理器，包括多个处理核，所述多核处理器配置用于前述第一方面的方法执行数据处理。

在第三方面中，本披露实施例提供了一种芯片，其包括前述第二方面的多核处理器。

在第四方面中，本披露实施例提供了一种板卡，其包括前述第三方面的芯片。

通过如上所提供的基于多核处理器的数据处理方法、多核处理器、芯片和板卡，本披露实施例的方案能够合理、灵活调度可用处理核来共同执行排序处理，从而匹配待处理数据的规模和可用的处理核资源，充分利用多个处理核的并行处理能力，有效提高数据排序处理速度。

附图说明

通过参考附图阅读下文的详细描述，本公开示例性实施方式的上述以及其他目的、特征和优点将变得易于理解。在附图中，以示例性而非限制性的方式示出了本公开的若干实施方式，并且相同或对应的标号表示相同或对应的部分，其中：

图1示出本披露实施例的板卡的结构图；

图2示出本披露实施例的组合处理装置的结构图；

图3a示出了本披露实施例的计算装置中单个处理核的内部结构示意图；

图3b示出了本披露实施例的计算装置为多核的内部结构简化示意图；

图4示出了根据本披露实施例的数据筛选阶段中选取第K大的数据的示例性逻辑流程图；

图5示出了根据本披露实施例的按照第一筛选配置进行数据筛选的示例性逻辑图；

图6示出了根据本披露实施例的按照第二筛选配置进行数据筛选的示例性逻辑图；