LWN:用 BPF 控制内存管理

作者: Jonathan Corbet
2026 年 5 月 15 日 


LSFMM+BPF 

Roman Gushchin 在 2026 年 Linux 存储、文件系统、内存管理与 BPF 峰会(LSFMM+BPF)的内存管理分会场开始了他的演讲。他提到,社区已经看到了许多为内存管理添加基于 BPF 的接口的提案。然而,目前还没有一个提案进入主线(mainline)。他希望探讨 BPF 可能发挥作用的方式,以及到目前为止阻碍基于 BPF 的解决方案进入主线的障碍。随后,Shakeel Butt 主持了一场讨论,探讨了用于内存控制组(memory control groups)的新型 BPF 接口可能需要满足哪些要求。 

BPF 集成的障碍

他首先指出,现有的尝试已经试图涵盖许多不同的内存管理启发式方法。已经有提案建议使用 BPF 来控制 内存不足处理(out-of-memory handling,OOM)、 NUMA 平衡、 内存控制组、 页面缓存置换(page-cache eviction)等。还有更多有趣的构想尚未付诸实践,包括预读(readahead)控制、 madvise() 、 内核同页合并(kernel samepage merging)以及客户机内存控制。尤其是预读,它包含了一套混乱的启发式规则,但对于性能至关重要。 

他说,为内存管理子系统添加 BPF 接口存在许多障碍;他将按照重要性从小到大的顺序进行介绍。第一个障碍是对树外(out-of-tree)BPF 程序的担忧。内核开发者希望看到生产级别的代码进入主线,但目前 BPF 的运作方式并非如此。例如,已经有了生产级别的 sched_ext 调度器,但它们都固执地留在树外。BPF 维护者 Alexei Starovoitov 表示,“ sched_ext 是一个错误”,因为它没有随之将任何生产级别的调度器带入主线。他说,这种局面现在很难扭转。如果能有一个好的树内 OOM 处理器就好了;即便没有别的作用,它也能帮助开发者评估提议的接口。 

Gushchin 说,在内核树中包含 BPF 程序似乎并无争议,因此真正的问题在于开发者应该走多远。第一步可以仅仅是包含源码供人们研究和试用。Starovoitov 说,自动加载内置的 BPF 程序可能是很好的第二步;这能让人们轻松地使用内置的 BPF 程序。Gushchin 建议,一个基于 BPF 实现的 systemd-oomd 将是展示该子系统如何运作的一个绝佳范例。 

另一个障碍是目前无法将 struct ops 程序挂载到控制组(cgroup)上。虽然可以挂载普通的 BPF 程序 ,但无法挂载那些使用 struct ops 接口的程序。他已经为 OOM 处理器提供了一个实现,但 sched_ext 使用的是另一种解决方案。 

接下来是安全性和回退(fallback)问题;一个有缺陷的 BPF 内存管理程序可能会轻而易举地使系统无法使用。在 Gushchin 看来,这是最难解决的问题;甚至很难定义在这种情况下“安全性”意味着什么。他说,基于时间的回退方案难以实现且不够优雅。内存管理操作可以被封装进受监控的 kfuncs 中,但这会导致非通用的解决方案,从而损害性能。需要定义可接受的服务级别;一个丢弃所有数据包的流量控制程序是可以接受的,但一个让系统中一半任务处于饥饿状态的 sched_ext 调度器则没那么容易被接受。如果加载了一个有问题的 BPF 程序,导致系统再也无法回收内存,该怎么办? 

对于热路径(hot path)性能的担忧将一直存在,这使得在最核心的路径中添加 BPF 程序变得难以自圆其说。内存管理子系统在很大程度上依赖批处理(batching)来提升性能,这就产生了一个问题:BPF 程序应该在批处理之前还是之后运行?他建议批处理应该先行,但这使得无法通过 BPF 程序来控制批处理本身。 

最后,他说最重要的障碍是 ABI 的稳定性;这一担忧最近刚被 David Hildenbrand 在邮件列表中 提出。Hildenbrand 在现场表示,关于为 BPF 程序提供钩子(hook)意味着什么,存在一些困惑:它们是一种永久性的内存管理特性吗?社区可能并不想承诺无限期地保留这些钩子。这种担忧导致了一项决定,即不为透明大页(transparent huge pages)的管理提供钩子;他说,没人知道五年后情况会变成什么样,因此现在不可能设计出正确的接口。 

他说,未来可能会发生这样的情况:内存管理开发者某天醒来,意识到接口的某些方面应该换一种做法。如果他们付诸行动,程序就会崩溃,人们会感到愤怒。或许解决方案是仅承诺支持那些在内核树本身维护的 BPF 程序。Hildenbrand 最后总结道,他看到了使用 BPF 的价值,但担心添加接口可能会迫使子系统在未来去维护那些令其后悔的特性。 

演讲此时已到预定时间。在结束语中,Gushchin 表示,仅添加最通用的 BPF 钩子至关重要。例如,添加一个用于分配 OOM 分数的钩子可能不是个好主意,因为未来的 OOM 杀手可能不再使用这些分数。但一个在压力下释放内存(或许是通过杀掉某些进程)的钩子可能会很有用。 

重新构想内存控制组

紧接着,Shakeel Butt 讨论了他希望看到的内核 内存控制器(memory controller)的演进方向,以及 BPF 如何融入其中。他首先介绍说,内存控制器分层级地分配内存资源,并实现了硬限制(hard limit)和软限制(soft limit)。当内存充裕时,任何给定的组都可以使用多达其硬限制的内存,但当内存紧张时,其用量会被压缩回软限制。 

他说,内存控制器面临着许多挑战。限制的执行缺乏灵活性且具有干扰性;由于它是同步发生的,可能会导致对延迟敏感的线程出现意外停顿。其接口已被证明难以演进,因为重大更改会破坏现有的 ABI,而内核开发者是不允许这么做的。他说,如果有一种机制能让实验替代方案成为可能,那就太好了。 

新接口的目标是提供能够支持各种用例的能力。 他的会议提案中提供了一个用例示例,并在会议期间再次提及: 

策略:“将系统级内存利用率保持在 95% 以下;通过不限制持有锁的分配器来避免优先级反转(priority inversions);在不降低相关性能指标的前提下,将每个工作负载的用量削减至其工作集(working set)大小;与工作负载协作进行减载和内存削减决策;在极端内存压力下,与 OOM 杀手和中央作业调度器协作,杀死并清理某个工作负载。” 

他说,新的内存控制器需要提供应用程序可以响应的内存使用通知。它需要支持后台回收(background reclaim),以便在不阻塞运行线程的情况下执行内存限制。内存使用限制(throttling)应该能感知到持有锁的线程,以避免优先级反转问题。用户空间需要能够以其他方式影响限制操作,例如,能够识别出哪些特定线程在一定程度上应该被豁免。控制器还应支持内存分层(memory tiering),提供对页面在各层之间迁移方式的控制。 

由于时间紧迫,无法深入探讨这一新接口的具体运作方式;总的来说,这项工作似乎还处于早期阶段。Butt 说,可以添加一个新的 BPF 回调函数 bpf_memcg_charge_succeed() ,以告知 BPF 程序内存用量的增加;该程序随后可能会通过启动后台回收来做出响应。其他回调函数可以在控制组达到使用水位线(或触及使用上限)时通知程序,并依靠程序提供如何应对的暗示。该程序可能会启动某种形式的回收,但它也可以将情况告知应用程序,并期望该应用程序通过减少其内存用量来做出响应。 

最后,一名听众提到,一个有用的特性是能够内省应用程序正在使用哪些类型的内存;Butt 回答说,这项特性已经在开发中了。 

LWN 评论概述:

[一位未知用户对 BPF 在内存管理中的稳定性发表了看法…] 

审视支持 BPF 稳定性的问题非常有趣。从技术上讲,文档确实做出了一些关于 ABI 的声明,例如 kfuncs 可能随时发生变化,而 BPF 辅助函数(helpers)则不然,且被认为是稳定的。 

要论证在 BPF 中验证内存管理程序的可行性是件难事。似乎不太可能在第一次尝试时就获得一个足够灵活、能涵盖所有用例,同时又不从根本上破坏验证器(verifier)所提供的“安全性”的方案。所以我明白为什么这成了一个棘手的话题。 

关注了就能看到更多这么棒的文章哦~   全文完
 LWN 文章遵循 CC BY-SA 4.0 许可协议。 

欢迎分享、转载及基于现有协议再创作~

长按下面二维码关注,关注 LWN 深度文章以及开源社区的各种新近言论~

代码转载自:https://pan.quark.cn/s/8ce4326d996e 对于在 CentOS 7 系统中修改网卡配置文件后无法使设置生效的情况,经过实践验证,可以通过使用 nmcli 命令来进行调整。完成修改之后,需要重新启动虚拟机以使更改生效,这样操作流程即告完成。如果设置仍然无法生效,则表明虚拟机在启动过程中所获取的 IP 地址配置并非针对 eth0,此时可以对其它网卡的配置文件进行修改或将其移除。在 CentOS 7 系统中,网络配置的管理机制与早期版本存在差异,主要体现为采用了 Network Manager 服务来负责网络接口的管理。在某些情形下,尽管修改了 `/etc/sysconfig/network-scripts` 目录下的 `ifcfg-eth0` 文件,但网络配置却未能即时生效。此类问题的发生通常源于 CentOS 7 采用了不同于以往的配置读取方法。接下来将具体阐述如何借助 nmcli 命令来处理这一挑战。 以 root 用户身份登录系统并打开终端界面。nmcli 是 Network Manager 提供的命令行界面工具,它支持在命令行环境下执行网络连接的建立、编辑、查询及管理任务。针对修改 eth0 网卡配置的需求,可以遵循以下步骤进行操作: 1. 导航至 `/etc/sysconfig/network-scripts` 目录: ``` cd /etc/sysconfig/network-scripts ``` 2. 检查该目录内是否存在 `ifcfg-eth0.bak` 文件,该备份文件可能是先前调整配置时遗留下来的,若存在可能造成冲突。若发现该文件,可以选择将其删除: ``` [root@localhost netw...
代码转载自:https://pan.quark.cn/s/46fd08fb879c 网管教程 从入门到精通软件篇 ★一。★详尽的xp修复控制台指令及其应用!!! 放入xp(2000)的光盘,安装时选择R,执行修复! Windows XP(涵盖 Windows 2000)的控制台指令是在系统遭遇某些意外状况时的一种极具效用的诊断、检测以及恢复系统功能的工具。笔者确实一直期望能够将这方面的指令进行归纳,此次由老范辛苦整理了这份极具价值的秘籍。 Bootcfg bootcfg 命令用于启动配置与故障恢复(对大多数计算机而言,即 boot.ini 文件)。 带有特定参数的 bootcfg 命令仅在运用故障恢复控制台时方可使用。能够在命令行界面下运用带有不同参数的 bootcfg 命令。 用法: bootcfg /default 设定默认引导选项。 bootcfg /add 向引导清单中增添 Windows 安装。 bootcfg /rebuild 重复整个 Windows 安装流程并让用户选择需添加的项目。 注意:运用 bootcfg /rebuild 之前,应先借助 bootcfg /copy 命令备份 boot.ini 文件。 bootcfg /scan 探查用于 Windows 安装的全部磁盘并展示结果。 注意:这些结果被静态存储,并用于当前会话。若在当前会话期间磁盘配置发生变动,为获取更新的探查结果,必须先重启计算机,然后再次探查磁盘。 bootcfg /list 列示引导清单中已有的项目。 bootcfg /disableredirect 在启动引导程序中禁用重定向。 bootcfg /redirect [ PortBaudRrate] |[ useBio...
代码下载链接: https://pan.quark.cn/s/fc524f791b68 AA制程,即Active Alignment,被理解为主动对准,是一种用于确定零部件装配中相对位置的方法。在摄像头封装阶段,涉及图像传感器、镜座、马达、镜头、线路板等多个部件的重复组装,而传统的封装设备如CSP及COB等,均是依据设备设定的参数进行零部件的移动装配,因而零部件的叠加误差会逐渐增大,最终在摄像头上表现为拍照最清晰的位置可能偏离画面中心、四边清晰度不均等现象。伴随智能手机和其他高端电子产品的普及,摄像头模组的性能正日益受到重视。高分辨率、卓越的低光表现以及稳定视频输出是现代用户所期望的。在摄像头模组的制造环节,各部件的精准定位对成像质量具有决定性作用。因此,一种名为“AA制程”(Active Alignment)的前沿技术被开发出来,成为摄像头精密对准的核心技术。 AA制程,即Active Alignment,是一种在摄像头封装过程中应用的主动对准方法。该方法在多个组件装配阶段发挥作用,涵盖图像传感器、镜座、马达、镜头和线路板等部件。传统的封装方式,例如CSP(Chip Scale Package)和COB(Chip On Board),依赖于设备预设的参数进行组装,但随着组件数量的增加,误差也会累积,最终影响摄像头的表现。例如在成像质量上可能出现中心位置偏移、四角清晰度不一致等问题。 AA制程技术的核心在于实时监测与主动调整。在组装过程中,它借助先进的检测设备持续监控半成品的状态,并根据实时信息对组装部件进行精确修正,从而显著降低装配误差。通过这种技术,能够确保摄像头模组中各组件的相对位置准确无误,从而使得最终的成像效果更加稳定,特别是在中心区域和四角的清晰度上...
内容概要:本文介绍了一套基于Matlab实现的光子晶体90度弯曲波导的二维时域有限差分法(2D FDTD)仿真代码,旨在通过数值模拟手段深入研究光子晶体波导中的光传播特性。该资源聚焦于电磁场与光子学领域的仿真技术应用,系统实现了FDTD算法在复杂介质结构中的建模过程,涵盖空间网格剖分、时间步进迭代、完美匹配层(UPML)边界条件处理、总场散射场(TFSF)激励源设置、介电常数分布定义及电磁场演化可视化等核心模块,能够有效分析光在90度弯曲波导中的传输效率、模式分布与反射损耗等关键性能指标。; 适合人群:具备电磁场理论基础和Matlab编程能力的研究生、科研人员以及从事光子晶体器件设计与仿真的工程技术人员。; 使用场景及目标:①用于教学演示FDTD方法的基本原理与算法流程,帮助理解麦克斯韦方程的离散化求解过程;②支撑科研工作中对光子晶体弯曲波导结构的传输特性进行仿真分析与性能优化;③作为开发更复杂光子集成器件(如分束器、滤波器)数值仿真工具的基础框架; 阅读建议:建议使用者结合经典FDTD教材(如Taflove著作)深入理解算法理论,并在Matlab环境中逐模块调试代码,重点关注电场与磁场的交替更新过程、UPML吸收边界的设计实现以及TFSF源的引入方式,从而全面提升对时域电磁仿真机制的掌握与应用能力。
评论
添加红包

请填写红包祝福语或标题

红包个数最小为10个

红包金额最低5元

当前余额3.43前往充值 >
需支付:10.00
成就一亿技术人!
领取后你会自动成为博主和红包主的粉丝 规则
hope_wisdom
发出的红包
实付
使用余额支付
点击重新获取
扫码支付
钱包余额 0

抵扣说明:

1.余额是钱包充值的虚拟货币,按照1:1的比例进行支付金额的抵扣。
2.余额无法直接购买下载,可以购买VIP、付费专栏及课程。

余额充值