更新于

磁盘占用突然飙升、磁盘满了?3 步找出是什么占满了磁盘

简短回答:磁盘占用突然飙升时,先用 df -h 和 df -i 分清是容量满了还是 inode 用完,再对满的分区执行 sudo du -xhd1 找出变大的目录。常见原因是容器或系统日志、业务数据和备份,以及已删除但仍被进程占用的文件。

应用写入失败、数据库报 disk full,或监控显示根分区接近 100%,都不必先删文件。先确认是容量还是 inode 耗尽,再判断占用来自容器日志、业务数据,还是已被删除但仍被进程占用的文件。以下适用于常见 Linux VPS;路径与包管理器因发行版而异,请按本机实际替换。本文只有第 2 步 E 小节里标 【改动,会删除文件】 的命令会删除东西,其余命令都只读。

若证据已指向容器 json-file 日志,请转到 Docker 日志占满磁盘 做轮转配置;本文负责第一轮分流。

1. 先看容量、inode 与最近写入热点

df -h
df -i
sudo du -xhd1 / 2>/dev/null | sort -h
sudo du -xhd1 /var /home /opt /tmp 2>/dev/null | sort -h

df -h 看容量,df -i 看 inode。容量仍充足但 inode 用尽时,常见于大量小文件(缓存、上传碎片、构建产物)。du 用于找目录级热点;若根分区已满,大目录的 du 可能变慢,可先对可疑挂载点分别执行。记录观察时间与业务是否同时发布或导入数据。

2. 按来源分流,不要一上来清空

A. 容器日志

docker system df
docker info --format '{{.DockerRootDir}}'
docker ps -a --format 'table {{.Names}}\t{{.Status}}'

若 Docker 数据目录所在分区告警,再检查单个容器的日志路径与驱动(见 Docker 日志占满磁盘)。不要直接截断 Docker 管理的日志文件;先保留故障窗口内的错误证据。

B. 业务数据与数据库

sudo du -sh /var/lib/docker/volumes 2>/dev/null
sudo du -sh /var/lib/postgresql /var/lib/mysql /var/lib/mongo 2>/dev/null
sudo find /var/www /srv /data -xdev -type f -size +100M 2>/dev/null | head

路径仅为常见示例。上传目录、备份落盘、数据库膨胀、未清理的导出文件都会表现为「某业务路径突然变大」。确认增长是否与导入任务、备份失败重试或用户上传峰值一致,再决定是扩容、归档还是修应用逻辑。

C. 系统日志、包缓存与临时文件

journalctl --disk-usage
sudo du -sh /var/log /var/cache /tmp /var/tmp 2>/dev/null

journal、apt/yum/dnf 缓存、临时目录异常增长时,优先查是否有服务在刷错误,而不是先 rm -rf。清理缓存前确认没有依赖本地缓存的安装/回滚流程。

D. 文件已删但仍占空间

sudo lsof +L1 2>/dev/null | head -n 40

进程仍打开已删除文件时,df 显示空间未释放,du 却看不到对应文件。定位到进程后,优先在维护窗口重启该服务或按厂商文档轮转,而不是杀死未知进程。

E. 应用缓存/崩溃转储吃盘

du 指向 /var/lib/systemd/coredump、/var/crash、某个用户的 ~/.cache,或者应用目录里冒出几个和内存差不多大的文件时,多半是这一类。它们的共同点是:单个文件很大,而且会随着崩溃或构建反复出现,所以先找出是谁在不停产生,再清理。

【只读】崩溃转储(core dump):

cat /proc/sys/kernel/core_pattern
coredumpctl list --no-pager 2>/dev/null | tail -n 20
sudo du -sh /var/lib/systemd/coredump /var/crash 2>/dev/null
sudo find / -xdev -type f \( -name 'core' -o -name 'core.[0-9]*' \) -size +10M -exec ls -lh {} + 2>/dev/null

【只读】应用缓存:

sudo du -sh /root/.cache /home/*/.cache 2>/dev/null | sort -h
du -sh ~/.cache/* 2>/dev/null | sort -h | tail -n 10
pip cache info 2>/dev/null
du -sh "$(npm config get cache 2>/dev/null)" 2>/dev/null
sudo du -sh /var/cache/apt /var/cache/dnf /var/cache/yum 2>/dev/null
docker system df

【只读】Java / Node 堆转储:

sudo find / -xdev -type f \( -name '*.hprof' -o -name '*.heapsnapshot' -o -name 'hs_err_pid*.log' -o -name 'report.*.json' \) -size +1M -exec ls -lh {} + 2>/dev/null
ps -eo args | grep -oE -- '-XX:[+]?HeapDump[A-Za-z]*(=[^ ]*)?|--heapsnapshot[^ ]*|--report-on-fatalerror|--diagnostic-dir[^ ]*' | sort | uniq -c

【改动,会删除文件】确认可以丢弃后再清理:

sudo coredumpctl dump --output=/mnt/OTHER_DISK/core.APP.keep PID
sudo rm /var/lib/systemd/coredump/core.APP_NAME.*
pip cache purge
npm cache clean --force
sudo apt-get clean
sudo dnf clean packages
docker builder prune --filter until=168h
sudo rm /path/to/app/java_pid12345.hprof

3. 变更前:最小动作、验证与回退

在负责人批准前,只做只读排查。确需释放空间时:

说明性示例

这是说明性示例,不是真实客户案例:根分区 df -h 显示 98% 已用,df -i 正常;du 显示 /var/lib/docker 最大,但 docker system df 中 Images/Containers 并不突出。进一步检查发现某应用容器的 json-file 日志达数十 GB,且错误为数据库连接拒绝的高频重复。只删日志会再次告警;应先修复连接或限流日志,再配置 max-size / max-file。若同一场景下 df -i 先耗尽而 du 看不到特大文件,则应转向小文件目录与上传/缓存路径,而不是假定「又是 Docker 日志」。

AI 排查提示词

请先只做检查、不做任何改动:查看磁盘容量与 inode、最大目录、Docker 数据目录与最近错误日志趋势。判断证据更支持「容器日志」「业务数据」「系统缓存」「应用缓存/崩溃转储」还是「已删除仍占用」,并列出仍缺少的信息。不要删除文件、截断日志或重启服务;如需变更,先给出最小步骤、风险、验证与回退供我确认。

试用

每月免费 500 次 AI 调用,服务器数量不限。桌面端默认把 SSH 凭证保留在本机,选择云端托管需要你自己开启。

常见问题

Linux 磁盘占用突然飙升、磁盘满了,怎么找出是什么占满的?

先用 df -h 和 df -i 分清是容量满了还是 inode 用完,记下是哪个分区、什么时间。再对满的分区执行 sudo du -xhd1,找出变大的目录;根分区已满时,大目录的 du 可能很慢,可以先对可疑挂载点分别执行。常见原因是容器或系统日志、业务数据和备份,以及已删除但仍被进程占用的文件。确认来源之前,不必先删文件。

df -h 显示还有空间,为什么应用还是写入失败?

可能是 inode 用完了。df -h 看的是容量,df -i 看的是 inode,容量还够、inode 却已耗尽的情况,常见于大量小文件,比如缓存、上传碎片和构建产物。这时去找小文件集中的目录和上传、缓存路径,不要先假定是日志太大。

df 显示磁盘满了,du 却找不到大文件,是怎么回事?

一种可能是文件已经被删除,但还有进程开着它:df 显示空间没释放,du 却看不到对应文件。可以用 sudo lsof +L1 查看。这只是可能的解释之一,不是结论。定位到进程后,优先在维护窗口重启该服务,或者按厂商文档轮转,不要直接杀死不认识的进程。

是 Docker 容器日志占满了磁盘,可以直接清空日志文件吗?

不要直接截断 Docker 管理的日志文件,先保留故障窗口内的错误证据。用 docker system df 和 docker info --format '{{.DockerRootDir}}' 确认 Docker 数据目录所在分区,再查是哪个服务在高频刷错误。容器日志问题应该用轮转配置控制后续增长,而不是反复手动清空;只删日志、不修报错,还会再次告警。

需要帮助理解排查结果?

OpsMate(itops.sh)把 SSH 终端和 AI 放在同一页,由你核对证据。每次让 AI 帮忙看,终端里最近的输出都会一起发到云端 AI,敏感信息请先去掉。

免费开始 本地凭证桌面端

排障指南