5

我过去在 Linux 上通过设置 proc 文件的值来设置 IRQ 关联。[1] 但是,我注意到,当我在将 MSI-X 用于我想为 NIC 设置亲和性的设备 (PCIe) 的系统上执行此操作时,/proc/interrupt 计数器会为 IRQ 的每个核心递增,并且不适用于我为其设置的单核。在非 MSI-X 系统中,指定内核响应中断的位置。

我正在使用 Linux 内核 3.11。

简短:可以为使用 MSI-X 中断的设备设置 IRQ 关联吗?

[1] https://www.kernel.org/doc/Documentation/IRQ-affinity.txt

4

1 回答 1

0

Unburrying 这个线程,我正在尝试为我的 SATA 控制器设置 IRQ (MSI-X) cpu 亲和性,以避免 cpu 切换延迟。到目前为止,我通过以下方式获得了当前使用的 IRQ:

IRQ=$(cat /proc/interrupts | grep ahci | awk -F':' '/ /{gsub(/ /, "", $1); print $1}')

只需查看中断,就可以cat /proc/interrupts看出我的 sata 控制器处理涉及多个 CPU。

然后我通过

echo 02 > /proc/irq/$IRQ/smp_affinity

我可以测试有效的亲和力

cat /proc/irq/$IRQ/effective_affinity

在进行了一段时间的磁盘基准测试后,我注意到亲和力保持配置不变。例子:

在基准测试之前,将 IRQ 134 绑定到 cpu 2:

 cat /proc/interrupts | egrep "ahci|CPU"
             CPU0       CPU1       CPU2       CPU3       CPU4       CPU5       CPU6       CPU7
  134:   12421581          1          0         17       4166          0          0          0  IR-PCI-MSI 376832-edge      ahci[0000:00:17.0]

基准测试后:

 cat /proc/interrupts | egrep "ahci|CPU"
            CPU0       CPU1       CPU2       CPU3       CPU4       CPU5       CPU6       CPU7
 134:   12421581    2724836          0         17       4166          0          0          0  IR-PCI-MSI 376832-edge      ahci[0000:00:17.0]

因此,就我而言,我设置的亲和力保持不变。我只能想象你irqbalance作为服务运行。你检查过吗?就我而言,运行 irqbalance 会重新分配亲和性并覆盖我设置的亲和性。

我的测试系统:CentOS 8.2 4.18.0-193.6.3.el8_2.x86_64 #1 SMP Wed Jun 10 11:09:32 UTC 2020 x86_64 x86_64 x86_64 GNU/Linux

最后,我没有获得更好的磁盘利用率/性能。我最初的问题是 fio 基准测试不使用 100% 磁盘,仅使用 75-85% 之间的一些值(有时是 97%,我不知道为什么)。

于 2020-07-16T09:27:48.720 回答