[发明专利]一种基于RSS的并发进程数据处理的方法

说明书

本发明提供的一种基于RSS的并发进程数据处理的方法及装置，通过将动态启动与RSS接收队列个数相同的进程个数，可最大化进程的并发度，避免资源浪费。同时，将进程分别与不同的CPU ID绑定，避免了多个进程运行在同一个CPU上时需要采用额外的锁方案才能保证对同一个接收队列的互斥访问，同时也避免了进程在CPU之间切换时带来的资源消耗。

技术领域

本发明涉及计算机技术领域，特别涉及一种基于RSS的并发进程数据处理的方法。

背景技术

多网卡接收队列技术的接收方缩放(Receive Side Scaling，RSS)是一种将网卡接收报文IP头部携带的多个元组通过hash映射的方式放置在不同的接收队列中，并将队列通过中断绑定到不同的CPU上，通过这种方式，多个CPU能够并发地进行报文处理，提高报文处理效率。

对于多进程并发进行报文处理时，进程的启动个数往往是通过配置文件，或者根据CPU的个数，fork出对应个数的进程数量。进程个数与RSS队列个数无关联，在运行时，由Linux对进程进行动态调度，则多个进程可能运行在同一个CPU上，在进程访问接收队列获取数据报文时，需要通过互斥锁机制的来进行资源的独占。如图3所示，现有技术中支持RSS的多接收队列的网卡在并发进程数据处理的方法示意图，现有的方法存在如下不足之处：

缺点1：当进程个数小于RSS队列个数时，则无法同时进行所有接收队列数据的读取，无法保证最高并发度。而当多个进程个数大于RSS个数时，则造成部分进程无法进行接收队列的读取而浪费资源。

缺点2：当进程没有与CPU进行绑定时，则由系统进行进程的调度，可能出现多个运行在一个CPU上时，就需要通过互斥锁来保证共享资源的访问，锁的处理降低了报文处理效率。

同样，当由系统进行多进程的调度时，进程需要在多个CPU间切换，则每次将进程载入内核的过程都需要重新调入进程环境变量，也降低了进程的处理效率。

发明内容

(一)要解决的技术问题

为了解决现有技术的上述问题，本发明提供一种基于RSS的并发进程数据处理的方法及装置，能够避免多个进程在访问同一个接收队列时的互斥抢占，提高并发进程对数据处理的效率和整体的运行效率。

(二)技术方案

为了达到上述目的，本发明采用的一种技术方案为：

一种基于RSS的并发进程数据处理的方法，包括步骤：

S1、在进程启动时，判断网卡是否支持RSS，若是，则执行步骤S2，否则，执行步骤S3；

S2、读取配置文件获取进程个数n，并根据所述进程个数n进行第一处理；

S3、读取RSS接收队列个数j和CPU个数m，并根据所述队列个数和CPU个数进行第二处理。

为了达到上述目的，本发明采用的另一种技术方案为：

一种基于RSS的并发进程数据处理的装置，包括存储器、处理器及存储在存储器上并可在处理器上运行的计算机程序，所述处理器执行所述程序时实现以下步骤：

S1、在进程启动时，判断网卡是否支持RSS，若是，则执行步骤S2，否则，执行步骤S3；

S2、读取配置文件获取进程个数n，并根据所述进程个数n进行第一处理；

S3、读取RSS接收队列个数j和CPU个数m，并根据所述队列个数和CPU个数进行第二处理。

(三)有益效果