磁盘满或 inode 耗尽：先确认挂载点与 inode，再按文件类型清理

补充说明

No space left on device 可能是块满、inode 满、保留块、配额、只读重挂载或容器层占满。先 df -hT 和 df -i 分清是哪一种，再决定清理对象；不要直接 rm -rf。本页是分诊入口，单场景的处置见 no-space-left、disk-io-high 和 disk-readonly。

边界：不覆盖磁盘性能调优和文件系统选型；IO 延迟高但空间充足时看磁盘 IO 高，ext4/XFS/Btrfs 的差异见文件系统对比。

3 分钟定位

df -hT
df -i
du -x -h --max-depth=1 / 2>/dev/null | sort -h | tail
du -x -h --max-depth=1 /var 2>/dev/null | sort -h | tail
lsof +L1
find / -xdev -type f -size +1G -printf '%s %p\n' 2>/dev/null | sort -n | tail
journalctl --disk-usage
mount | grep ' ro[,)]'

容器与 Kubernetes 补查：

docker system df 2>/dev/null
crictl images 2>/dev/null | head
kubectl describe node <node> | grep -A5 Conditions
kubectl get pods -A -o wide | grep <node>

根因树

1. 块满：日志、备份、core dump、临时文件、数据库 WAL/binlog、容器镜像层。先用 du -x 找顶层目录，再逐层下钻，不要全盘 find。
2. inode 满：大量小文件（会话、缓存、邮件队列、临时文件）。df -i 的 IUse% 接近 100%，空间却还有剩余。
3. 已删除仍占用：进程持有被删除文件的句柄，lsof +L1 能看到；确认进程后可重启或谨慎截断。
4. 容器层占用：删除容器内文件只改 upperdir，镜像/容器/卷不删除，宿主机空间不会立即释放。
5. 分区或挂载问题：数据写到了小分区、挂载点被覆盖、NFS 服务端满；对比 df 与 findmnt 的实际挂载。
6. 保留块与配额：ext4 默认给 root 保留 5%，普通用户可能提前写满；配额限制则看 repquota。
7. 只读文件系统：IO 错误或内核保护会把文件系统重挂为只读，先看 dmesg，不要反复 mount -o remount,rw 掩盖问题。

相关命令

• df — 按挂载点看空间与 inode。
• du — 目录级占用，配合 -x 不跨文件系统。
• lsof — 找已删除但仍被打开的文件。
• find — 按大小、时间筛大文件。
• ncdu — 交互式目录占用浏览。
• iostat — 区分“空间满”和“IO 慢”。
• no-space-left — 标准处置流程。
• k8s-node-disk-pressure — 节点 DiskPressure。
• Kubernetes 生产检查清单 — 磁盘告警与驱逐阈值。
• Windows 磁盘管理 — Windows 侧的对应操作。

相关教程

• ext4 与 XFS — 保留块、inode 与适用场景。
• Btrfs 与 ZFS — 快照、压缩与空间回收。
• 搭建可观测性栈 — 给磁盘使用率和水位建告警。
• Linux 性能排查路线 — 空间、IO 与 inode 的检查顺序。

易错点与排错

• df 显示满但 du 对不上：优先怀疑已删除仍打开的文件、挂载命名空间和 ext4 保留块；lsof +L1 比继续 du 更快。
• 空间还有剩余却写失败：看 df -i，inode 耗尽时删大文件没用，要删大量小文件或调整 inode 策略。
• 容器里删文件不释放宿主机空间：overlayfs 的 lowerdir 仍在，需删除容器/镜像或执行 prune；先确认没有运行中的容器依赖。
• rm 一个被进程打开的大日志不会立即释放空间；确认进程后可重启，或用 : > file 截断（先确认不是正在写入的关键文件）。
• logrotate 的 copytruncate 与 create 行为不同：copytruncate 有短暂窗口和拷贝开销，create 需要进程重新打开文件。
• Docker 与 containerd 的存储目录不同：/var/lib/docker 与 /var/lib/containerd 要分别检查，别只清一个。
• Kubernetes 的 DiskPressure 会触发镜像回收和 Pod 驱逐；先看节点条件与 kubelet 阈值，再决定清镜像还是扩容。
• 文件系统变只读通常是 IO 错误的结果；先保存 dmesg，确认硬件/网络存储状态，再考虑重挂载。

参考链接

• man7: df(1)
• man7: du(1)
• man7: lsof(8)
• Kubernetes: 节点压力驱逐
• Docker: 清理未使用资源

读完自测

合上页面，先回答，再展开对照。

1. df 显示 100%，但 du 各目录加起来对不上，常见原因有哪些？
2. 空间还有剩余却报 No space left on device，应该先看什么？
3. 在容器里删除了大文件，宿主机空间为什么没有释放？