LWN:移除kthread freezer!

关注了就能看到更多这么棒的文章哦~

Removing the kthread freezer

By Jake Edge
June 23, 2023
LSFMM+BPF
ChatGPT assisted translation
https://lwn.net/Articles/935602/

2023 年 Linux 存储、文件系统、内存管理和 BPF 峰会的最后一天,由 Luis Chamberlain(他还主持了第二天的全体会议)主持了三个独立的会议。其中之一是关于 kthread-freezer-removal 工作的文件系统会议。kthread freezer 旨在帮助文件系统冻结其状态,以便 suspend 或休眠(hibernate)整个系统,但至少从 2015 年以来,就一直有人计划移除这个功能。一年后的情况也没有多大改变,2018 年的 LSFMM 会议上,Chamberlain 接手了 Jiri Kosina 的移除工作;今年,Chamberlain 回来继续推动其进展。

他开始时说,让文件系统在准备 suspend 系统之前冻结文件系统状态,在 Linux 上多年来一直存在问题,这可能会让一些人感到惊讶。目前没有统一的机制来冻结文件系统,如果有大量的 I/O 操作正在进行,那么在 resume 时可能会导致系统 hang,这不会是用户想要的结果。

问题出在 kthread-freezer API 上,该 API 用来帮助在 suspend 操作期间停止进行中的 I/O,但它的语义有些不严谨,使用方式也比较随意。上次在 LSFMM 讨论 kthread-freezer 问题时,控制组(cgroup)冻结在内核中就出现了问题,但他想知道现在的情况如何。Aleksa Sarai 表示已经 fix 了这个问题,但另一位与会者补充说,这需要一个新的 cgroup 文件系统。Chamberlain 表示,在冻结过程中还存在与自动挂载工具(automounter)冲突的问题,但会场上没有人似乎了解这方面的情况;“那么我们都需要记住这一点”。

2d411d951f4ab35f1b8f833ed6a2fd4b.png

[Luis Chamberlain]

有一些时序问题需要解决。最终可能需要构建一个文件系统 superblock 的有向无环图(DAG, directed acyclic graph),以便按正确顺序进行冻结和解冻操作。他说,Al Viro 曾感叹原来实现的 LOOP_CHANGE_FD ioctl()命令,从而 Fedora 的 live 安装方式可以直接跳转到新安装的文件系统;但这在遍历 superblock 时破坏了预期的顺序,因此这些系统的 suspend 可能会出现问题。RAID 也可能引入时序方面的异常。人们假设在遍历 superblock 时,正向和反向迭代的次序是一致的;这很可能在大多数使用笔记本电脑和移动设备的使用场景中是可行的,他们是主要的在进行 suspend 操作的用户。

Chamberlain 想知道是否需要一种机制来通知用户空间应用程序即将进行 suspend 操作,以便给它们一些时间来安静下来。Ted Ts'o 说 Windows 中已经有这种通知机制,但应用程序需要花一定的时间才能安静下来;如果这个过程无法完成,suspend 操作将继续进行而不管它们。实现这种通知并不难,“那只要使用 D-Bus 或类似的东西做管道就行”。

处理 network block 设备是另一个问题领域,Ts'o 说这个问题已经被提出 8 年了,但是“每个人都说‘是的,这很难’,然后都悄悄退后了”。David Howells 指出,FUSE 文件系统也增加了这个问题的复杂性,因为它既有内核空间的部分,也有用户空间的部分需要被冻结。Amir Goldstein 指出,checkpoint/restore 的开发者已经在处理这些复杂情况,这可能成为一个模型。

Lennart Poettering 说,systemd 已经有了一套基础设施用于进行用户空间的通知。如果应用程序希望接收通知,它们可以从 systemd 中获取,并在需要时有几秒钟的反应时间。他指出,目前的 suspend-then-hibernate 顺序是在 suspend 模式下经过一段时间后唤醒所有用户空间的工作,然后进行 hibernate,这个做法是“很愚蠢的”。因此,目前正在进行的一个开发工作,就是使用 cgroup freezer 把除了跟切换到 hibernate 模式的小部分内容之外的所有其他用户空间工作都保持冻结状态。Jan Kara 表示,内核仍然需要对文件系统进行解冻,以便让监测(overseer)进程可以检查电池状态等。

Chamberlain 表示,听起来用户空间方面的问题在很大程度上已经解决了。他想讨论在文件系统中移除 kthread-freezer 调用后的下一步。他会使用 Coccinelle 语义 patch 来进行这个移除操作。他最新的 patch 是用于替代 kthread freezer API 的自动内核 freeze 和 resume 代码的核心部分;之前今年 1 月份的 RFC patch set 使用 Coccinelle 规则移除了十几个文件系统中的相关代码。

他怀疑是否有必要继续在内核的其他部分中来移除对这个 API 的使用。他说,该 API 是为了允许文件系统停止进行中的 I/O 操作,所以在其他地方使用的话可能是错误的。Jeff Layton 说该 API 在 NFS 中被使用,他并不认为是正确的做法,所以他打算提供帮助从 NFS 中移除 kthread freezer。Sarai 说 cgroup v1 仍然使用 kthread freezer,他不知道为什么没有与 cgroup v2 进行类似的更改;在完全移除 API 之前,需要讨论一下。Howells 指出,所有网络文件系统都会存在 Layton 关注的一些问题。Chamberlain 总结说,可以逐步进行这个移除工作,挨个处理文件系统和子系统。

请注意,此会议的视频名称被错误标记成了 Chamberlain 主持的 iomap-conversion-status 会议,其实该会议是紧随其后的,并且不出意外,该会议的视频标题为“Removal of kthread freezer next steps”(移除 kthread freezer 的下一步)。

全文完
LWN 文章遵循 CC BY-SA 4.0 许可协议。

欢迎分享、转载及基于现有协议再创作~

长按下面二维码关注,关注 LWN 深度文章以及开源社区的各种新近言论~

format,png

内容概要:本文详细介绍了利用二维时域有限差分法(2D FDTD)对光子晶体90度弯曲波导进行数值仿真的Matlab代码实现。该仿真方法旨在精确分析光子晶体波导在弯曲结构下的光传输特性,揭示其导光机制与缺陷模式的调控原理。资源包含完整的Matlab程序代码,支持对空间网格划分、介电常数分布、边界条件(如PML吸收边界)及光源参数等关键仿真要素的灵活设置与优化,便于用户复现结果并开展深入研究。通过仿真可直观获得光场在波导中的传播动态、透射谱特性以及能量损耗情况,为高性能光子器件的设计与优化提供理论依据和技术支持。; 适合人群:具备电磁场理论、光学基础和Matlab编程能力,从事光子学、集成光学或纳米光子器件研究的研究生、科研人员及工程技术开发者。; 使用场景及目标:①学习和掌握FDTD方法在周期性介质(光子晶体)器件仿真中的具体应用流程;②研究90度弯波导的光传输性能,分析弯曲损耗来源并探索低损耗结构优化方案;③作为光子集成电路中关键无源器件的设计与教学参考案例,服务于学术研究与工程实践。; 阅读建议:建议结合光子晶体能带理论与FDTD算法基本原理进行系统学习,运行代码时应逐步调整结构参数与仿真设置,观察光场演化和输出结果的变化,以深化对物理现象的理解,并可在此基础上拓展至其他复杂光子结构(如分束器、谐振腔)的仿真分析。
内容概要:本文系统研究了基于共识的捆绑算法(Consensus-Based Bundle Algorithm, CBBA)在多智能体多任务分配中的应用,重点聚焦于远程太空船交会与维修任务中的相对运动规划(RPO)问题。通过构建多航天器协同任务场景,采用Matlab代码实现了CBBA算法的全过程仿真,展示了其在分布式决策框架下高效完成任务分配的能力。研究深入探讨了任务收益建模、路径规划约束、通信延迟与动态重规划等关键环节,验证了CBBA在确保任务分配一致性、避免资源冲突、适应动态环境变化以及优化整体任务效能方面的优越性能,为复杂空间任务中的自主协同提供了可靠的技术路径。; 适合人群:具备控制理论、航天动力学、分布式优化或多智能体系统等相关背景,从事航天任务规划、智能优化算法研究或相关工程实践的研究生、科研人员及航空航天领域工程师。; 使用场景及目标:①为多航天器在轨服务(如交会对接、空间维修)提供高效、鲁棒的分布式任务分配解决方案;②深入理解CBBA算法的核心机制及其在高动态、强约束空间任务中的适应性与优化潜力;③推动分布式人工智能算法在航天工程实际系统中的集成与应用验证。; 阅读建议:建议读者结合提供的Matlab代码,重点剖析任务建模逻辑、收益函数设计、共识迭代过程及收敛性分析模块,通过修改场景参数进行仿真实验,以深化对多智能体协同决策机制与算法性能边界条件的理解。
内容概要:本文研究了一种计及自适应预测修正的微电网模型预测控制(MPC)优化调度方法,并提供了基于Matlab的完整代码实现。该方法融合自适应预测机制与MPC滚动优化框架,有效应对微电网中可再生能源出力波动、负荷需求不确定性等多重挑战,显著提升调度决策的精度与系统鲁棒性。通过构建动态反馈校正机制,实时修正预测模型误差,优化未来时段的运行策略,实现对微电网内部分布式电源、储能系统及可控负荷的协同调控,达成经济性、稳定性与环保性多目标的综合优化。所提方法具有较强的工程实用性与理论价值,为现代智能微电网的能量管理系统提供了可靠的技术支撑。; 适合人群:具备电力系统分析、优化控制理论基础及Matlab编程能力的研究生、科研人员,以及从事微电网、智能配电系统、新能源并网等领域技术研发的工程技术人员。; 使用场景及目标:①应用于高校与科研机构开展微电网优化调度算法的仿真研究与性能验证;②服务于电力企业或能源科技公司开发先进能量管理系统(EMS),提升微电网运行效率与可再生能源消纳能力;③作为自动化、电气工程等专业的高级教学案例,帮助学生深入理解MPC在复杂能源系统中的建模、优化与反馈控制全过程。; 阅读建议:建议读者结合Matlab代码逐模块分析算法实现流程,重点掌握预测模型构建、滚动优化求解及反馈修正机制的设计逻辑,可通过调整预测时域、权重系数与扰动场景等参数进行仿真实验,深入理解各环节对系统性能的影响。
内容概要:本文围绕电力系统短期负荷预测问题,深入研究了基于极限学习机(ELM)及其智能优化算法的应用方法,提出并实现了白鲸优化算法(BWO)和鹭鹰优化算法(IBOA)对ELM模型的关键参数进行寻优的技术路径。通过Matlab编程实现,优化后的模型有效提升了预测精度,降低了原始ELM因随机初始化带来的不稳定性和误差波动,增强了模型在面对电力负荷不确定性变化时的泛化能力和鲁棒性。研究系统阐述了ELM的基本原理、两种新型群智能优化算法的搜索机制及其在解决非线性参数优化问题上的优势,并通过实验对比验证了优化模型在均方根误差(RMSE)、平均绝对百分比误差(MAPE)等指标上的显著优越性,为电力系统负荷预测提供了高效可靠的解决方案。; 适合人群:具备电力系统分析、人工智能算法理论基础及Matlab编程能力的高校研究生、科研机构研究人员以及电力公司从事负荷预测、电网调度与能源管理的工程技术人员。; 使用场景及目标:①应用于电网调度中心的短期负荷预测业务,提高预测准确性,保障电力供需平衡;②为智能优化算法在电力工程领域的落地应用提供可复现的技术范例;③支撑电力市场出清、发电计划制定、储能系统配置及需求侧响应等关键决策环节; 阅读建议:建议读者结合提供的Matlab代码进行实践操作,重点理解ELM网络结构搭建、适应度函数设计、优化算法迭代流程及预测结果后处理等关键步骤,通过调整数据集和参数设置,深入掌握模型调优技巧,并尝试将该方法迁移至风电、光伏功率预测等相似时序预测任务中。
下载代码方式:https://pan.quark.cn/s/d305330341ec 在当代科技领域中,华为作为中国顶尖的科技企业,持续研发先进技术以优化用户的使用感受。鸿蒙操作系统(HarmonyOS)是由华为独立设计的一款面向多场景的分布式操作系统,其目标在于消除不同设备间的隔阂,促成无障碍的联合工作。本指南将详尽阐释在非华为品牌的个人电脑上,如何运用鸿蒙超级终端、多屏联动(多视窗)特性以及NFC芯片,使这些功能得到充分的发挥。 鸿蒙超级终端作为鸿蒙系统的关键特性之一,它将多样化的设备整合为一个统一体,使用户能够在多个设备之间无拘无束地转换和共享资源。对于非华为电脑的使用者而言,或许需要借助华为的电脑助手软件或特定的鸿蒙OS应用来实现与鸿蒙设备的对接。在完成相关软件的安装和配置后,用户能够借助超级终端特性将第三方电脑与华为手机、平板及其他鸿蒙设备进行配对,达成文件交换、屏幕显示同步乃至跨设备操作。 多屏联动(多视窗)特性是华为为增强工作效率而策划的特色功能。在非华为电脑上运用这一特性,用户能够将手机或平板的显示界面投射到电脑上,甚至可以在电脑上直接操控移动设备的应用,达成两个显示界面间的流畅配合。例如,用户可以在电脑上撰写文档的同时,在手机上查阅资料,两者同步进行,显著提升了工作效率。 NFC(近场通信)芯片是物联网技术的一种实践,它能够储存数据并与具备NFC功能的设备展开互动。在华为的生态系统里,NFC芯片常被用于迅速启动特定任务,如激活多屏联动。只需将设定了相应指令的NFC芯片贴附在电脑或手机上,轻轻触碰,就能自动启动多屏联动,极为便捷。 在实践这个指南的过程中,用户应留意以下几点: 1. 保证你的非华为电脑具备NFC功能,并且已安装了最新的华为电脑助...
内容概要:本文提出了一种基于非合作博弈理论的居民负荷分层调度模型,并采用双层鲸鱼优化算法进行求解,旨在应对风电出力不确定性下的电力系统负荷调度问题。该模型通过构建系统运营商与居民用户之间的双层博弈架构,上层以最小化负荷峰谷差为目标制定激励性电价信号,下层用户则在电价引导下优化用电行为以降低电费支出,最终实现纳什均衡状态。双层鲸鱼优化算法被用于高效求解该嵌套优化问题,在保证全局寻优能力的同时提升了收敛精度。仿真结果表明,该模型能有效实现削峰填谷,改善负荷曲线形态,增强电网对可再生能源的消纳能力,具有良好的应用前景。; 适合人群:具备一定电力系统基础知识和优化算法背景的研究生、科研人员及从事智能电网、需求响应、能源管理等领域的工程技术人员。; 使用场景及目标:①应用于高比例可再生能源接入的配电系统中,实现居民侧负荷的智能化调控;②为电力公司设计分时电价或激励型需求响应机制提供理论依据与技术支持;③作为双层优化、智能算法与博弈论在能源系统中融合应用的教学与研究案例。; 阅读建议:读者应重点关注非合作博弈的建模逻辑与双层优化问题的分解方法,建议结合Matlab代码实现部分,动手复现仿真过程,深入理解鲸鱼算法在上下层迭代求解中的实现细节,并尝试将其推广至多主体能源交互、虚拟电厂调度等更广泛的场景中。
源码链接: https://pan.quark.cn/s/a4b39357ea24 在深度学习领域,卷积神经网络(Convolutional Neural Network, CNN)是处理序列数据和图像数据的重要工具。 Keras 是一个高级神经网络API,它提供了便捷的方式来构建和训练CNN模型。 本文将深入探讨Keras中的`Conv1D`和`Conv2D`层的区别,帮助读者更好地理解和应用这两个关键组件。 `Conv1D`和`Conv2D`的主要区别在于它们处理的数据维度。 `Conv1D`主要用于一维数据,如时间序列分析、文本分类等,而`Conv2D`则用于二维数据,如图像处理。 1. 数据维度: - `Conv1D`:该层接受一维输入,形状通常是 `(batch_size, time_steps, features)`。 在这里,`time_steps`表示序列的长度,`features`是每个时间步的特征数量。 - `Conv2D`:该层处理二维输入,例如图像,其形状为 `(batch_size, height, width, channels)`。 `height`和`width`代表图像的高度和宽度,`channels`通常对应RGB图像的三个颜色通道或单通道灰度图像。 2. 卷积核(Kernel): - `Conv1D`的卷积核也是一维的,沿着输入的时间轴进行滑动,对每个时间步的特征进行卷积操作。 - `Conv2D`的卷积核是二维的,它同时在图像的高度和宽度方向上滑动,可以捕获空间上的局部特征。 3. 参数设置: - `kernel_size`:对于`Conv1D`,它是一个整数,表示卷积核在时间轴上的跨度。 对于`Conv2D`,它是一个包含两个整数...
评论
添加红包

请填写红包祝福语或标题

红包个数最小为10个

红包金额最低5元

当前余额3.43前往充值 >
需支付:10.00
成就一亿技术人!
领取后你会自动成为博主和红包主的粉丝 规则
hope_wisdom
发出的红包
实付
使用余额支付
点击重新获取
扫码支付
钱包余额 0

抵扣说明:

1.余额是钱包充值的虚拟货币,按照1:1的比例进行支付金额的抵扣。
2.余额无法直接购买下载,可以购买VIP、付费专栏及课程。

余额充值