Ofi*_*esh 6 networking nic affinity irq linux-device-driver
我想设置 Intel 10G NIC 使用的 RX/TX 队列数。让我解释一下原因:
我在 Dell R720 系统上使用 X520 型 Intel 10G NIC。我正在使用 ixgbe 版本 3.6.7-k。Ubuntu 3.2.0-59 中的内核。
我正在机器上 24 个内核中的 4 个内核上运行我的网络应用程序。目前 NIC 正在使用流导向器,所以我有 24 个 TX 和 RX 队列,而大多数 IRQ 最终在运行应用程序的 4 个内核上运行。
但是,我看到一些 IRQ 正在其他 20 个队列上运行(这可能是因为流导向器对大约 20% 的流量进行采样,因此一些流量通过常规 RSS)。现在我不希望在其他 20 个内核上运行任何 IRQ,因为它们正在执行不同的任务,而这些任务会被运行的 IRQ 损坏。
我尝试仅将中断的关联设置为我使用的 4 个内核,但这不适用于 flow-director。我想更好的方法是仅使用 4 个 RX/TX 队列并将它们分配给专用内核。但是我找不到在 ixgbe 驱动程序中设置 RX/TX 队列数量的方法(尽管这对于我熟悉的其他 10G 驱动程序非常简单,例如 Broadcom 的 bnx2x)。
任何的想法?
小智 4
对于最新 Linux 内核源(截至 3.18.0-rc1)中的 ixgbe 版本(当前为 3.19.1-k),这是不可能的。
您需要从e1000.sf.net获取最新的 ixgbe 驱动程序(当前为 3.22.3) ,它支持 RSS 参数。来自modinfo ixgbe:
parm: RSS:接收端缩放描述符队列数量,默认 0=cpu 数量(int 数组)
因此,如果您有一个 ixgbe NIC 并需要 4 个队列,则需要向 modprobe.conf(或发行版中的同等内容)添加如下一行:
options ixgbe RSS=4
Run Code Online (Sandbox Code Playgroud)
然后,您需要为 /proc/interrupts 中与您的 NIC 匹配的任何 irq 设置 /proc/irq/*/smp_affinity cpu 掩码。