3、操作系统调优：Linux内核参数调优

做高频回扣交易，操作系统就是你的跑道。

跑道不平，飞机再好也白搭。我见过太多团队，策略模型跑得飞起，一上实盘就各种延迟抖动。问题出在哪？八成在操作系统层面。

今天咱们就聊聊Linux内核调优。说白了，就是让操作系统给你的交易程序让路。

3.1 网络栈调优：让数据包飞得更快

高频交易对网络延迟极其敏感。毫秒级的差异，可能就是盈亏的分水岭。

我个人习惯，第一件事就是调整网络缓冲区。

# 调整网络缓冲区大小（单位：字节）
net.core.rmem_max = 134217728
net.core.wmem_max = 134217728
net.core.rmem_default = 65536
net.core.wmem_default = 65536

# 调整TCP缓冲区
net.ipv4.tcp_rmem = 4096 87380 134217728
net.ipv4.tcp_wmem = 4096 65536 134217728

# 启用TCP快速打开
net.ipv4.tcp_fastopen = 3

# 减少TIME_WAIT连接数
net.ipv4.tcp_tw_reuse = 1
net.ipv4.tcp_tw_recycle = 0  # 注意：新版内核已移除该参数

还有一个容易被忽略的参数——net.core.netdev_budget。它控制CPU每次轮询网络设备时处理的数据包数量。

# 增加轮询预算
net.core.netdev_budget = 600
net.core.netdev_budget_usecs = 4000

为什么会这样？默认值只有300，在高吞吐场景下，CPU来不及处理所有数据包，就会产生丢包。我建议调到600，配合中断亲和性效果更好。

3.2 中断亲和性：把中断绑在指定CPU上

你想想看，网卡收到数据包，会触发一个中断。这个中断落在哪个CPU上？默认是随机的。

随机意味着什么？CPU缓存失效、上下文切换频繁。这对高频交易来说是灾难。

我的做法：把网卡中断绑定到特定CPU核心上。

# 查看网卡中断号
cat /proc/interrupts | grep eth0

# 假设中断号是 78-85，绑定到 CPU 2-3
echo 0c > /proc/irq/78/smp_affinity
echo 0c > /proc/irq/79/smp_affinity
# ... 以此类推

0c是二进制00001100的十六进制表示，对应CPU 2和3。为什么用两个核心？一个处理收包，一个处理发包，互不干扰。

3.3 CPU隔离（isolcpus）：给交易程序专属跑道

Linux默认的进程调度是公平的。但高频交易不需要公平，需要独占。

isolcpus内核参数可以把指定CPU从调度器中隔离出来。普通进程不会跑到这些核心上，只有你手动绑定的进程才能用。

在GRUB配置中添加：

isolcpus=2,3,4,5 nohz_full=2,3,4,5 rcu_nocbs=2,3,4,5

这里我隔离了4个核心（2-5）。nohz_full关闭了时钟中断，rcu_nocbs把RCU回调也移走了。目的只有一个——减少一切可能的干扰。

然后通过taskset把进程绑上去：

taskset -c 2,3 ./trading_engine

嗯，这里要注意：隔离后，这些核心上不能跑其他任何东西。包括监控代理、日志收集器。我见过有人隔离了核心，但忘了关掉系统监控，结果延迟还是不稳定。

3.4 内存大页（HugePages）：减少TLB Miss

现代CPU使用TLB（页表缓存）来加速虚拟地址到物理地址的转换。默认4KB的页大小，TLB很快就会被填满。

TLB Miss了怎么办？CPU得去查内存里的页表，一次查询就要几十纳秒。高频交易中，这种开销不可接受。

大页（HugePages）把页大小提升到2MB甚至1GB。同样的TLB条目数，能覆盖的内存范围大了512倍。

# 分配1024个2MB大页（共2GB）
echo 1024 > /proc/sys/vm/nr_hugepages

# 查看分配情况
grep HugePages /proc/meminfo

应用程序需要显式使用大页。以DPDK为例：

# 挂载大页文件系统
mkdir -p /mnt/huge
mount -t hugetlbfs nodev /mnt/huge

# 或者使用DPDK脚本
dpdk-hugepages.py -p 2M --setup 2G

3.5 低延迟内核（RT Kernel）的选择

标准Linux内核为了吞吐量，牺牲了确定性。RT内核（PREEMPT_RT）则相反——它追求可预测的延迟。

要不要用RT内核？我的看法是：

• 纯软件交易（不涉及FPGA、网卡硬件卸载）：RT内核很有帮助。它能将最大延迟从几毫秒降到几十微秒。
• 硬件加速场景（使用DPDK、Solarflare网卡）：标准内核就够了。因为数据面已经绕过内核，RT内核的优势不明显。

安装RT内核（以Ubuntu为例）：

apt-get install linux-image-rt-amd64

然后重启，选择RT内核启动。验证：

uname -a | grep PREEMPT

如果看到PREEMPT RT字样，说明成功了。

3.6 知识体系总览

下面这张图，是我梳理的操作系统调优核心逻辑：

这张图把四个调优方向串起来了。你会发现，它们的目标是一致的——减少干扰，提升确定性。

3.7 调优效果对比

我整理了一份调优前后的对比数据，供你参考：

指标	调优前	调优后	改善幅度
网络延迟（P99）	120μs	35μs	70%
延迟抖动（标准差）	45μs	8μs	82%
TLB Miss率	3.2%	0.4%	87%
上下文切换/秒	12000	800	93%

数据来自我参与的一个期货高频项目。调优后，策略的夏普比率从1.8提升到了2.6。当然，不同场景效果会有差异，但方向是对的。

---

公众号:蓝海资料掘金营，微信deep3321