操作系统调优：内核参数、中断绑定、CPU隔离、内存大页
说到操作系统调优，我脑子里第一个蹦出来的词就是「细节是魔鬼」。做量化交易，尤其是微秒级链路，操作系统层面的调优往往决定了你的策略能不能跑赢对手。很多人觉得代码写好了就万事大吉，其实不然。操作系统默认的配置，说白了是为通用场景设计的，对低延迟交易来说，简直就是灾难。
我个人习惯把操作系统调优分成四个维度：内核参数、中断绑定、CPU隔离、内存大页。这四个点，每一个我都踩过坑。今天咱们一个一个聊。
内核参数调优：别让系统拖你后腿
内核参数调优，核心目标就一个：减少不必要的上下文切换和中断。你想想看，你的交易线程正忙着计算，结果系统突然切出去处理网络包或者磁盘IO，这一来一回，几十微秒就没了。在微秒级的世界里，这简直是不可接受的。
我常用的几个关键参数，列在下面这张表里：
| 参数名 | 推荐值 | 说明 |
|---|---|---|
| net.core.rmem_default | 16777216 | 增大接收缓冲区，减少丢包 |
| net.core.wmem_default | 16777216 | 增大发送缓冲区，减少阻塞 |
| net.ipv4.tcp_rmem | 4096 87380 16777216 | TCP接收窗口调大 |
| net.ipv4.tcp_wmem | 4096 65536 16777216 | TCP发送窗口调大 |
| vm.swappiness | 0 | 禁止内存交换，避免抖动 |
| kernel.sched_migration_cost_ns | 5000000 | 减少CPU迁移，保持缓存亲和性 |
嗯，这里要注意。很多人一上来就把 vm.swappiness 设成 0，觉得这样最安全。其实不然。我在项目中遇到过，设成 0 后，系统在内存紧张时反而会频繁触发 OOM killer。我个人建议设成 1，既避免交换，又保留一点弹性。
配置方法很简单，直接写到 /etc/sysctl.conf 里：
# 低延迟交易内核参数配置
net.core.rmem_default = 16777216
net.core.wmem_default = 16777216
net.ipv4.tcp_rmem = 4096 87380 16777216
net.ipv4.tcp_wmem = 4096 65536 16777216
vm.swappiness = 1
kernel.sched_migration_cost_ns = 5000000
改完后执行 sysctl -p 生效。记得先备份原配置，别问我怎么知道的。
中断绑定：把中断钉死在特定CPU上
中断绑定，说白了就是让网卡中断只在一个或几个CPU上处理，别到处乱跑。为什么？因为中断处理程序会打断正在运行的线程，如果中断在CPU之间飘来飘去，你的交易线程就永远不知道下一秒会被谁打断。
我常用的做法是：把中断绑定到非交易核心的CPU上。比如你有16个CPU，交易线程跑在0-7号核心上，那就把中断绑定到8-15号核心上。这样交易线程几乎不会被中断打扰。
具体操作分两步：
- 查看中断号：
cat /proc/interrupts | grep eth0，找到网卡对应的中断号。 - 绑定中断：
echo 0f0 > /proc/irq/<中断号>/smp_affinity。这里的0f0是CPU掩码，表示只允许第4-7号核心处理这个中断。
我曾经在一个项目中，因为没做中断绑定，导致交易线程的延迟抖动从5微秒飙到了50微秒。排查了整整两天，最后发现是网卡中断和交易线程抢CPU。绑定之后，抖动直接降回5微秒以下。嗯，这个坑我替你们踩过了。
irqbalance 服务自动分配中断，但低延迟场景下我建议手动绑定。自动分配虽然省事，但不够精细。
CPU隔离：给交易线程一个专属的「单间」
CPU隔离，就是让某些CPU完全脱离系统的调度管理，只运行你指定的线程。这样做的目的是彻底避免其他进程或内核线程来抢CPU。
Linux内核提供了 isolcpus 启动参数。在 /etc/default/grub 的 GRUB_CMDLINE_LINUX 里加上：
isolcpus=0-3 nohz_full=0-3 rcu_nocbs=0-3
这个配置的意思是：CPU 0-3 被隔离，不参与普通进程调度；同时关闭这些CPU上的时钟中断（nohz_full），并且不让RCU回调在这些CPU上运行（rcu_nocbs）。
你想想看，一个CPU上既没有时钟中断，又没有其他进程来抢，你的交易线程跑在上面，那延迟稳定性简直无敌。
不过要注意，隔离后的CPU上不能跑任何其他进程，包括系统服务。我建议把交易线程绑定到隔离CPU上，用 taskset 或者 sched_setaffinity 都行。
内存大页：减少TLB miss，提升内存访问速度
内存大页，英文叫 HugePages。默认情况下，Linux内存页大小是4KB。对于交易系统这种需要大量内存访问的场景，4KB的页会导致TLB（页表缓存）频繁失效。每次TLB miss，CPU都要去查页表，这一下就是几十纳秒。积少成多，延迟就上去了。
大页的默认大小是2MB，是4KB的512倍。用大页后，同样的TLB条目可以覆盖更大的内存区域，TLB miss率大幅下降。
配置大页分两步：
- 预留大页：在
/etc/sysctl.conf里设置vm.nr_hugepages=1024，表示预留1024个2MB的大页，总共2GB。 - 挂载hugetlbfs：
mount -t hugetlbfs hugetlbfs /dev/hugepages，然后你的程序就可以通过mmap或者共享内存来使用大页了。
代码示例（C语言）：
#include <sys/mman.h>
#include <fcntl.h>
// 使用大页分配内存
int fd = open("/dev/hugepages/page", O_CREAT | O_RDWR, 0755);
void *addr = mmap(NULL, 2 * 1024 * 1024, PROT_READ | PROT_WRITE,
MAP_SHARED, fd, 0);
// 现在 addr 指向的内存就是大页分配的
我个人习惯在交易系统的共享内存中使用大页。比如行情数据、订单簿这些高频访问的数据结构，用大页后延迟能降低10%-20%。
知识体系总览
下面这张图，是我对操作系统调优四个维度的总结。你可以把它当作一个检查清单，每次部署新系统时对照着做一遍。
这四个维度，每一个单独拿出来都能讲一整天。但核心思想就一句话：让交易线程独占资源，减少一切不必要的干扰。内核参数调优是基础，中断绑定和CPU隔离是进阶，内存大页是锦上添花。我个人建议，先从内核参数和中断绑定入手，这两个效果最明显，也最容易操作。
好了，操作系统调优这块就聊到这儿。记住，调优不是一蹴而就的事，需要根据你的硬件和业务场景反复测试。别怕麻烦，每一微秒的优化，都可能意味着真金白银的收益。