Linux MGLRU 与 PSI：消除高并发 VPN 网关的内存抖动与延迟

高负载的 VPN 集中器与安全出境网关面临着极为苛刻的内存分配挑战。当承载数万个并发加密隧道、汇聚 40 Gbps 至 100 Gbps 的混合 UDP 与 TCP 流量时，Linux 网络子系统需要连续分配并释放套接字缓冲区（sk_buff）、连接跟踪状态表项以及密码学环形队列。在突发线速报文冲击下，系统可用物理内存会急剧缩减，迫使操作系统内核启动内存回收机制。

在过去二十多年中，Linux 内核一直依赖经典的主动/非主动（Active/Inactive）双链表最近最少使用（LRU）算法来管理物理页面的淘汰。尽管这种机制在通用服务器上表现良好，但在对延迟极为敏感的网络网关节点上，却极易引发灾难性的尾部延迟抖动（tail latency spikes）。一旦空闲内存跌破低水位线（low watermark），内核便会陷入直接回收（direct reclamation）模式：网络报文转发线程不得不停滞数十甚至数百毫秒去遍历繁琐的反向映射链表，造成严重丢包并破坏语音、视频等实时流会话。

Linux 6.1 正式合并的 Multi-Gen LRU（MGLRU，多代最近最少使用算法）与 Linux 4.20 引入的 Pressure Stall Information（PSI，系统资源压力停顿信息）从底层彻底重构了边缘网络节点的内存治理逻辑。两者结合实现了确定性的多代页面老化分层、无锁页表遍历以及微秒级的内存停顿监控，使高性能 VPN 路由器在极端报文洪峰下依然能够保持稳定的线速转发能力。

传统双链表 LRU 的性能瓶颈

要剖析网络网关为何在传统内核内存回收中遭受严重的延迟抖动，必须审视双链表子系统的工作原理：

传统双链表 LRU 架构:
[ Active 链表 (热页面) ] <--- 全局大锁激烈竞争 (zone->lru_lock) ---> [ Inactive 链表 (冷页面) ]
            |                                                                       |
       kswapd 扫描                                                              页面回收 / 换出
   (O(N) 反向映射, 耗尽 CPU)                                                (触发直接回收停顿)

传统的双链表设计在高速数据面中存在四大核心痛点：

全局锁竞争白热化：整个内存区域（Zone）的所有页面状态流转、晋升和淘汰都必须竞争获取全局锁 zone->lru_lock。当数十个 CPU 核心并发处理隧道收发包时，工作线程耗费大量处理器周期盲等内存锁释放。
反向映射（rmap）遍历开销巨大：为了判断非活动链表中的页面近期是否被读取，内核必须跨越引用该物理页面的所有进程虚拟地址空间去扫描反向映射链表。这种链表跳跃引发大量 CPU 缓存缺失（Cache Miss）与计算浪费。
页面生命周期划分粗糙：页面仅有“活跃”与“非活跃”两档状态。内核无法辨别一秒钟前刚被处理的套接字缓冲与十分钟未被访问的陈旧数据。这种缺乏时间细粒度的机制常导致正在承载流量的活跃路由表项被误杀。
直接回收引发大规模丢包：当后台回收进程 kswapd 的释放速度赶不上突发网络报文的分配速率时，分配线程将被迫就地执行同步直接回收。正在转发流量的数据面线程突然被阻塞在慢速磁盘 I/O 上，直接导致网络接口环形队列溢出丢包。

Multi-Gen LRU 架构：代际分层与无锁扫描

Multi-Gen LRU 彻底摒弃了粗糙的双链表划分，转而构建了结构清晰的多代（Generation）流水线体系。物理页面根据时间演进被归入以自增序号标识的不同代际中：

MGLRU 代际流水线:
[ 第 N 代 (最年轻) ] ---> [ 第 N-1 代 ] ---> [ 第 N-2 代 ] ---> [ 第 N-3 代 (最古老) ]
         ^                                                             |
         |---------------- 页面命中 / 软性晋升 -------------------------|
                                                                       v
                                                                 有序平滑淘汰
                                                             (无直接回收停顿)

代际演进与无锁页表遍历

MGLRU 不再依赖沉重的反向映射扫描，而是使用高效的页表遍历器（page-table walker），直接从硬件页表项（PTE）中读取硬件设置的访问标志位（Accessed Bit）。整个页表遍历基于 RCU（Read-Copy Update）无锁机制实现，显著降低了 CPU 算力消耗：

代际晋升：当加密报文抵达并访问隧道内存时，硬件自动标记访问位。在周期性老化扫描中，高频访问的热页面被推升至最新的代（max_seq），而闲置页面则随时间自然沉降至老一代（min_seq）。
精准淘汰陈旧页面：页面回收仅在最古老的代（min_seq）中执行。由于 max_seq 与 min_seq 之间的距离精准刻画了时间跨度，MGLRU 能够精确隔离真正的工作集与瞬时网络流量，杜绝关键网络缓存的早夭。
冷热缓存智能平衡：MGLRU 动态平衡文件页缓存（Page Cache）与匿名内存换出，摆脱了传统内核对 swappiness 经验参数的盲目猜测，保障密码学常驻内存免遭异常颠簸。

基于 Pressure Stall Information (PSI) 的微秒级压力感知

除了依靠 MGLRU 保持内存代际有序外，高可靠网络网关还需要在丢包发生前具备毫秒级的内存资源压力感知能力。Linux 内核的 PSI 子系统提供了这一关键指标。

PSI 能够以极高精度度量工作线程因等待内存分配而处于不可运行状态的时间占比，主要包含两项核心指标：

/proc/pressure/memory:
some avg10 = 0.05 avg60 = 0.02 avg300 = 0.00 total = 142083
full avg10 = 0.00 avg60 = 0.00 avg300 = 0.00 total = 0

some 指标：表示在统计窗口内，至少有一个任务因等待内存回收或分配而处于停滞状态的时间百分比，此时其他核心仍可处理报文。
full 指标：表示在统计窗口内，某个 CPU 核心上的所有就绪任务全部因内存停滞而挂起的时间百分比。在网络网关场景中，任何大于零的 full 数值都意味着数据包丢失的重大隐患。

Linux 允许用户态守护程序通过 epoll(2) 或 select(2) 针对 /proc/pressure/memory 文件注册阈值事件触发器。当停滞时间在设定的滑动窗口（如 500 毫秒内超过 15 毫秒）超出阈值时，内核会以极低延迟立即唤醒管理守护进程。

生产环境实战：在网关节点配置 MGLRU 与 PSI

在运行 Linux 6.1 或更高版本内核的主机上，首先确认内核编译选项已包含 MGLRU 支持：

# 验证内核编译配置支持
zcat /proc/config.gz | grep CONFIG_LRU_GEN
CONFIG_LRU_GEN = y
CONFIG_LRU_GEN_ENABLED = y

通过 Sysfs 动态调优 MGLRU

通过 /sys/kernel/mm/lru_gen 虚拟文件系统查看并开启完整的代际遍历与多线程硬件加速：

# 位掩码解析:
# 第 0 位 (1): 启用 MGLRU 页表遍历
# 第 1 位 (2): 启用多线程并发页表遍历器
# 第 2 位 (4): 启用跨 NUMA 节点的独立代际跟踪
# 写入 7 (1 + 2 + 4): 开启全套硬件加速能力
echo 7 > /sys/kernel/mm/lru_gen/enabled

# 设置代际老化的最小生存周期 (例如 2000 毫秒)
# 防止网络流量爆发时发生过激的页面降代
echo 2000 > /sys/kernel/mm/lru_gen/min_ttl_ms

基于 Python 异步监听 PSI 压力事件

VPN 守护进程可以异步接收内存停顿通知，以便在内存吃紧时动态下调非必要后台任务或重新调配连接链路：

import select, os

# 以非阻塞读写方式打开内存压力控制文件
psi_fd = os.open("/proc/pressure/memory", os.O_RDWR | os.O_NONBLOCK)

# 注册阈值触发器：在 500 毫秒时间窗口内停顿超过 15 毫秒即发出通知
trigger = "some 15000 500000"
os.write(psi_fd, trigger.encode("ascii"))

epoll = select.epoll()
epoll.register(psi_fd, select.POLLPRI)

print("正在监听 PSI 内存压力停滞事件...")
try:
    while True:
        events = epoll.poll(timeout = 5)
        for fd, event in events:
            if event & select.POLLPRI:
                print("[警报] 触发 PSI 预警阈值！系统正面临内存回收压力。")
                # 动态收紧套接字读写缓冲区并清理闲置连接状态
finally:
    os.close(psi_fd)

RiceGuard VPN 核心引擎的落地实践

VPNRice 自研的高性能三层网络网关引擎 RiceGuard 深度整合了 MGLRU 与 PSI 机制：

代际结构隔离防护：RiceGuard 工作线程将数据包环形缓冲区部署在专用的 cgroup v2 资源切片中，并配置可靠的 memory.min 资源保障。MGLRU 机制使活跃传输状态稳定驻留于新生代，确保大文件突发传输不影响既有隧道的报文吞吐。
前置停顿防御机制：无需被动等待系统 OOM-killer 的破坏性处置，RiceGuard 守护进程持续追踪 PSI 压力反馈。一旦 some 停顿超过 2%，引擎会自动调节套接字接收窗口限制（SO_RCVBUF），并平滑将新增会话调度至冗余网关节点。
消除直接回收延迟突刺：在每秒处理 120 万个数据包、承载 8,000 条活跃加密隧道的极限压测下，启用 MGLRU 的节点将 p99.9 尾部网络抖动从传统内核的 48.2 毫秒大幅压缩至 1.4 毫秒。