问题现场

当你训练模型、处理大量文件或运行高并发服务时,突然出现:

Failed creating file: ... [Too many open files]

你按照标准方案修改了 /etc/security/limits.conf

* soft nofile 65536
* hard nofile 65536

但重启后 ulimit -n 依然显示 10244096。为什么?

根本原因:Systemd 接管了资源限制

Manjaro(及 Arch 等现代 Linux 发行版)使用 Systemd 作为核心进程管理器。关键事实:

Systemd 管理的进程(包括用户桌面会话)在启动时会忽略传统的 limits.conf 配置!

它们只认 Systemd 自己的资源限制设置。

完整解决方案(四步走)

1. 修改系统级服务限制

sudo nano /etc/systemd/system.conf

取消注释并修改:

DefaultLimitNOFILE=65536:65536  # 格式:soft:hard

2. 修改用户级服务限制(关键!常被遗漏)

sudo nano /etc/systemd/user.conf

同样取消注释并修改:

DefaultLimitNOFILE=65536:65536

3. 重载配置并重启

# 重载系统配置
sudo systemctl daemon-reload # 重载用户配置(必须执行!)
systemctl --user daemon-reload # 彻底重启(否则不生效)
reboot

4. 验证生效情况

# 查看当前shell限制
ulimit -n # 应输出65536 # 检查任意进程的实际限制
sleep 1h & # 启动测试进程
cat /proc/$!/limits | grep "Max open files"

输出应包含:

Max open files            65536                65536                files

常见问题排查

1. 为什么桌面应用仍受限?

  • 原因:图形应用由 systemd --user 管理,只受 user.conf 约束
  • 解决:确保修改了 user.conf 并执行 systemctl --user daemon-reload

2. 重启后部分终端仍显示旧限制

  • 原因:终端会话未完全重启
  • 解决:关闭所有终端窗口,重新打开新终端

3. 系统服务(如Docker)未生效

  • 原因:系统服务受 system.conf 约束
  • 解决:确认已修改 system.conf 并执行 sudo systemctl daemon-reload

高级场景处理

只为特定服务增加限制

# 创建服务覆盖配置
sudo systemctl edit nginx.service # 添加内容
[Service]
LimitNOFILE=1048576

临时调试解决方案

# 当前终端会话有效
ulimit -n 65536 # 修改运行中进程的限制
prlimit --pid <PID> --nofile=65536:65536

为什么 limits.conf 会失效?

  • limits.conf 依赖 PAM 认证流程生效
  • Systemd 管理的进程(特别是桌面环境)绕过 PAM 初始化
  • 用户级服务由 systemd --user 直接启动,继承其默认限制

配置作用域总结

配置文件 影响范围 典型场景
/etc/systemd/system.conf 系统级服务 Docker, Nginx, PostgreSQL
/etc/systemd/user.conf 用户级进程 桌面应用,终端启动的脚本
/etc/security/limits.conf 通过PAM登录的会话 SSH登录,tty控制台

终极验证命令

# 查看系统全局限制
cat /proc/sys/fs/file-max # 查看当前用户限制
ulimit -n # 查看具体进程限制
cat /proc/$(pgrep -f your_process)/limits | grep open.files # 查看已打开文件数
lsof -u $USER | wc -l

总结流程图

graph LR
A[遇到错误] --> B{进程类型}
B -->|系统服务| C[修改 system.conf]
B -->|用户进程| D[修改 user.conf]
C --> E[执行双 reload]
D --> E
E --> F[重启系统]
F --> G[验证结果]
G -->|仍受限| H[检查特定服务]

Manjaro/Arch 彻底解决 "Too many open files":为什么你改的 limits.conf 不生效的更多相关文章

  1. 解决 browser-sync start --server --files 文件不能同步的问题!

    解决 browser-sync start --server --files 文件不能同步的问题! 请看我的源命令: browser-sync start --server --file 'test2 ...

  2. [转载]性能测试工具 2 步解决 too many open files 的问题,让服务器支持更多连接数

    [转载]性能测试工具 2 步解决 too many open files 的问题,让服务器支持更多连接数 大话性能 · 2018年10月09日 · 最后由 大话性能 回复于 2018年10月09日 · ...

  3. Centos 修改limits.conf open files后不生效的解决办法

    线上几台APACHE服务器报过三.四次open files的问题,导致服务不可用,执行ulimit -n 查看后,发现是默认的1024,找到原因所在了,就去修改下/etc/security/limit ...

  4. mysql5.7出现大量too many connections及too many open files错误,且配置最大连接数未生效

    too many connections是由于mysql配置中连接数过少,不足以支撑当前的并发数,too many open files是由于mysql open_files_limit的值大小不够. ...

  5. Windows中Nginx配置nginx.conf不生效解决方法(路径映射)

    Windows中Nginx配置nginx.conf不生效解决方法 今天在做Nginx项目的时候,要处理一个路径映射问题, location /evaluate/ { proxy_pass http:/ ...

  6. manjaro(arch)里的vbox 安装centos7后,centos无法联网的解决办法

    第一步,在VirtualBox中设置网卡连接方式:点“设置”,在弹出的界面中点“网络”,最后选择“连接方式”为“桥接网卡”. 回到centOS中,进入终端,输入命令:ip addr,查看网络配置文件的 ...

  7. manjaro (arch) 安装搜狗输入法

    本文通过MetaWeblog自动发布,原文及更新链接:https://extendswind.top/posts/technical/sogou_input_install_in_arch_manja ...

  8. Manjaro/Arch linux 安装输入法

    输入命令: sudo pacman -Syu fcitx fcitx-googlepinyin fcitx-im fcitx-configtool 编辑 ~/.xprofile:# xfcitxexp ...

  9. 解决Ubuntu系统的每次开机重启后,resolv.conf清空的问题

    问题情况描述如下: 普及知识:   /etc/resolv.conf ,其实是一个Link .它其实指向的是 /run/resolvconf/resolv.conf.  Ubuntu 有一个 reso ...

  10. 解决iOS9苹果将原http协议改成了https协议问题

    解决方法: 在info.plist 加入key <key>NSAppTransportSecurity</key> <dict> <key>NSAllo ...

随机推荐

  1. Linux下时区/系统时间/硬件时间的设置

    涨姿势,顺带笔记,留爪. 先简述下时区/系统时间/硬件时间的3个主要命令吧 tzselect tzselect命令主要针对时区设置和查看 tz=timezone的缩写,直译=时区 date date命 ...

  2. study Rust-8【使用结构体的方法】

    1.方法 与函数类似:它们使用 fn 关键字和名称声明,可以拥有参数和返回值,同时包含在某处调用该方法时会执行的代码.2.不过方法与函数是不同的,因为它们在结构体的上下文中被定义(或者是枚举或 tra ...

  3. 如何在 Vim 里直接完成 Git 操作?

    Vim 是 Linux 下一款很常用的文本编辑器,虽然它对初学者而言并不友好,但通过一些插件的配合,它可以被打造成一款很强大的 IDE .良许曾经介绍过三款很常用的插件,可点击以下链接查看: Vim ...

  4. MySQL 的 Doublewrite Buffer 是什么?它有什么作用?

    MySQL 的 Doublewrite Buffer 是什么?它有什么作用? Doublewrite Buffer 是 InnoDB 存储引擎的一种机制,旨在提高数据的安全性,防止在写入磁盘时发生崩溃 ...

  5. UT

    Mockito 官网 注解

  6. ES-问题:memory locking requested for elasticsearch process but memory is not locked

    错误信息: [2019-11-21T00:29:51,557][ERROR][o.e.b.Bootstrap          ] [elk-1] node validation exception ...

  7. 设计即合规: 开放AI生态中的用户数据治理实践

    Hugging Face Hub 已成为 AI 协作的核心平台,托管了数万个模型.数据集以及交互式应用程序 (Space). 在开放生态系统中,用户知情同意的管理方式与那些更 "数据饥渴&q ...

  8. Java--利用打印流(PrintStream)输出信息

    package demo; import java.io.File; import java.io.FileOutputStream; import java.io.PrintStream; /** ...

  9. 把iview的table做成更适合展现大量数据的样式(字体变小、去除多余的padding等)

    <style> .ivu-table { font-size: 12px !important; } .ivu-table-header thead tr th { padding: 0p ...

  10. 必看!手把手教你玩转Dify的3大核心工具!

    Dify 中的工具是指其平台内置或支持集成的功能插件,用于扩展 AI 应用的能力. 1.工具作用 扩展 LLM 的能力:工具可以赋予 LLM 连接外部世界的能力,例如联网搜索.科学计算.绘制图片等.例 ...