更新于
磁盘占用突然飙升、磁盘满了?3 步找出是什么占满了磁盘
简短回答:磁盘占用突然飙升时,先用 df -h 和 df -i 分清是容量满了还是 inode 用完,再对满的分区执行 sudo du -xhd1 找出变大的目录。常见原因是容器或系统日志、业务数据和备份,以及已删除但仍被进程占用的文件。
应用写入失败、数据库报 disk full,或监控显示根分区接近 100%,都不必先删文件。先确认是容量还是 inode 耗尽,再判断占用来自容器日志、业务数据,还是已被删除但仍被进程占用的文件。以下适用于常见 Linux VPS;路径与包管理器因发行版而异,请按本机实际替换。本文只有第 2 步 E 小节里标 【改动,会删除文件】 的命令会删除东西,其余命令都只读。
若证据已指向容器 json-file 日志,请转到 Docker 日志占满磁盘 做轮转配置;本文负责第一轮分流。
1. 先看容量、inode 与最近写入热点
df -h
df -i
sudo du -xhd1 / 2>/dev/null | sort -h
sudo du -xhd1 /var /home /opt /tmp 2>/dev/null | sort -h
df -h 看容量,df -i 看 inode。容量仍充足但 inode 用尽时,常见于大量小文件(缓存、上传碎片、构建产物)。du 用于找目录级热点;若根分区已满,大目录的 du 可能变慢,可先对可疑挂载点分别执行。记录观察时间与业务是否同时发布或导入数据。
2. 按来源分流,不要一上来清空
A. 容器日志
docker system df
docker info --format '{{.DockerRootDir}}'
docker ps -a --format 'table {{.Names}}\t{{.Status}}'
若 Docker 数据目录所在分区告警,再检查单个容器的日志路径与驱动(见 Docker 日志占满磁盘)。不要直接截断 Docker 管理的日志文件;先保留故障窗口内的错误证据。
B. 业务数据与数据库
sudo du -sh /var/lib/docker/volumes 2>/dev/null
sudo du -sh /var/lib/postgresql /var/lib/mysql /var/lib/mongo 2>/dev/null
sudo find /var/www /srv /data -xdev -type f -size +100M 2>/dev/null | head
路径仅为常见示例。上传目录、备份落盘、数据库膨胀、未清理的导出文件都会表现为「某业务路径突然变大」。确认增长是否与导入任务、备份失败重试或用户上传峰值一致,再决定是扩容、归档还是修应用逻辑。
C. 系统日志、包缓存与临时文件
journalctl --disk-usage
sudo du -sh /var/log /var/cache /tmp /var/tmp 2>/dev/null
journal、apt/yum/dnf 缓存、临时目录异常增长时,优先查是否有服务在刷错误,而不是先 rm -rf。清理缓存前确认没有依赖本地缓存的安装/回滚流程。
D. 文件已删但仍占空间
sudo lsof +L1 2>/dev/null | head -n 40
进程仍打开已删除文件时,df 显示空间未释放,du 却看不到对应文件。定位到进程后,优先在维护窗口重启该服务或按厂商文档轮转,而不是杀死未知进程。
E. 应用缓存/崩溃转储吃盘
du 指向 /var/lib/systemd/coredump、/var/crash、某个用户的 ~/.cache,或者应用目录里冒出几个和内存差不多大的文件时,多半是这一类。它们的共同点是:单个文件很大,而且会随着崩溃或构建反复出现,所以先找出是谁在不停产生,再清理。
【只读】崩溃转储(core dump):
cat /proc/sys/kernel/core_pattern
coredumpctl list --no-pager 2>/dev/null | tail -n 20
sudo du -sh /var/lib/systemd/coredump /var/crash 2>/dev/null
sudo find / -xdev -type f \( -name 'core' -o -name 'core.[0-9]*' \) -size +10M -exec ls -lh {} + 2>/dev/null
core_pattern决定转储写到哪:以|…systemd-coredump开头,由 systemd-coredump 存到/var/lib/systemd/coredump,用coredumpctl查看;以|…apport开头(Ubuntu 常见),崩溃报告在/var/crash;只写着core之类,转储会落在崩溃进程的工作目录里,用最后一条find找。coredumpctl list里同一个程序反复出现,说明它在不停崩溃,每崩一次留一份。先修崩溃(看应用日志,或者 Docker 退出码 137 与 OOMKilled),否则清完还会再满。- 名叫
core的文件不一定是转储,清理前用file 文件路径确认输出里有core file。 - systemd-coredump 的总量上限看
systemd-analyze cat-config systemd/coredump.conf里的MaxUse=和KeepFree=。
【只读】应用缓存:
sudo du -sh /root/.cache /home/*/.cache 2>/dev/null | sort -h
du -sh ~/.cache/* 2>/dev/null | sort -h | tail -n 10
pip cache info 2>/dev/null
du -sh "$(npm config get cache 2>/dev/null)" 2>/dev/null
sudo du -sh /var/cache/apt /var/cache/dnf /var/cache/yum 2>/dev/null
docker system df
~/.cache下常见的大户:pip、浏览器自动化工具下载的浏览器(ms-playwright、puppeteer)、模型文件(huggingface)、Go 的构建缓存(go-build)。CI 或构建用的账号尤其容易攒下几十 GB。docker system df里看 Build Cache 一行;RECLAIMABLE一列是能回收的大小。- 缓存删了一般能重新下载或重建,代价是下次安装、构建变慢。正在跑构建或安装时不要清。
【只读】Java / Node 堆转储:
sudo find / -xdev -type f \( -name '*.hprof' -o -name '*.heapsnapshot' -o -name 'hs_err_pid*.log' -o -name 'report.*.json' \) -size +1M -exec ls -lh {} + 2>/dev/null
ps -eo args | grep -oE -- '-XX:[+]?HeapDump[A-Za-z]*(=[^ ]*)?|--heapsnapshot[^ ]*|--report-on-fatalerror|--diagnostic-dir[^ ]*' | sort | uniq -c
- Java 开了
-XX:+HeapDumpOnOutOfMemoryError后,每次内存溢出都会写一个java_pid进程号.hprof,大小接近堆的大小,默认落在进程的工作目录,或-XX:HeapDumpPath指定的位置。hs_err_pid*.log是 JVM 崩溃日志,通常不大。 - Node 用
--heapsnapshot-near-heap-limit、--heapsnapshot-signal会写*.heapsnapshot,--report-on-fatalerror会写report.*.json,默认在工作目录或--diagnostic-dir。第二条命令看哪些进程带了这类参数;写在NODE_OPTIONS环境变量里的看不到。 - 跑在容器里的应用,转储写在容器内部的文件系统或挂载卷里;容器反复重启时,每次 OOM 都可能留下一份。
- 堆转储里是进程内存的原样内容,可能包含密码、token 和用户数据。 不要上传、外传或发给任何 AI 工具;需要留作分析的,挪到只有你能读的位置。服务器上还有哪些地方会放着明文密钥,见 服务器/仓库明文密钥 3 步自查。
【改动,会删除文件】确认可以丢弃后再清理:
sudo coredumpctl dump --output=/mnt/OTHER_DISK/core.APP.keep PID
sudo rm /var/lib/systemd/coredump/core.APP_NAME.*
pip cache purge
npm cache clean --force
sudo apt-get clean
sudo dnf clean packages
docker builder prune --filter until=168h
sudo rm /path/to/app/java_pid12345.hprof
- 第一条把还要分析的那份转储另存出来(
PID换成coredumpctl list里的进程号),存到别的分区或别的机器,别存回已经满了的分区;第二条删掉这个程序的其余转储,APP_NAME换成文件名里的程序名,先ls看一眼会匹配到哪些文件。 pip cache purge、npm cache clean --force清的是执行它的那个账号的缓存。apt-get clean(Debian/Ubuntu)和dnf clean packages(红帽系)只删已下载的安装包,不影响已安装的软件。docker builder prune --filter until=168h只删 7 天前的构建缓存,不动镜像、容器和数据卷,代价是下次构建慢一些。- 删除没有回退办法。
~/.cache下只删你认得出的工具目录,不要整个rm -rf ~/.cache。 - 清完之后,把根因处理掉:修崩溃、给
HeapDumpPath指一个单独的目录并定期清理,或者在coredump.conf里调小MaxUse=。然后按第 3 步复查df -h。
3. 变更前:最小动作、验证与回退
在负责人批准前,只做只读排查。确需释放空间时:
- 优先删除已确认可丢弃的缓存/过期备份,并保留操作记录
- 容器日志问题:用轮转配置控制后续增长,而不是反复手动清空
- 业务数据:先备份或快照,再归档;不要在未确认归属时批量删除
- 每次变更后复查
df -h、df -i、关键服务健康与告警是否复发
说明性示例
这是说明性示例,不是真实客户案例:根分区 df -h 显示 98% 已用,df -i 正常;du 显示 /var/lib/docker 最大,但 docker system df 中 Images/Containers 并不突出。进一步检查发现某应用容器的 json-file 日志达数十 GB,且错误为数据库连接拒绝的高频重复。只删日志会再次告警;应先修复连接或限流日志,再配置 max-size / max-file。若同一场景下 df -i 先耗尽而 du 看不到特大文件,则应转向小文件目录与上传/缓存路径,而不是假定「又是 Docker 日志」。
AI 排查提示词
请先只做检查、不做任何改动:查看磁盘容量与 inode、最大目录、Docker 数据目录与最近错误日志趋势。判断证据更支持「容器日志」「业务数据」「系统缓存」「应用缓存/崩溃转储」还是「已删除仍占用」,并列出仍缺少的信息。不要删除文件、截断日志或重启服务;如需变更,先给出最小步骤、风险、验证与回退供我确认。
试用
每月免费 500 次 AI 调用,服务器数量不限。桌面端默认把 SSH 凭证保留在本机,选择云端托管需要你自己开启。
常见问题
Linux 磁盘占用突然飙升、磁盘满了,怎么找出是什么占满的?
先用 df -h 和 df -i 分清是容量满了还是 inode 用完,记下是哪个分区、什么时间。再对满的分区执行 sudo du -xhd1,找出变大的目录;根分区已满时,大目录的 du 可能很慢,可以先对可疑挂载点分别执行。常见原因是容器或系统日志、业务数据和备份,以及已删除但仍被进程占用的文件。确认来源之前,不必先删文件。
df -h 显示还有空间,为什么应用还是写入失败?
可能是 inode 用完了。df -h 看的是容量,df -i 看的是 inode,容量还够、inode 却已耗尽的情况,常见于大量小文件,比如缓存、上传碎片和构建产物。这时去找小文件集中的目录和上传、缓存路径,不要先假定是日志太大。
df 显示磁盘满了,du 却找不到大文件,是怎么回事?
一种可能是文件已经被删除,但还有进程开着它:df 显示空间没释放,du 却看不到对应文件。可以用 sudo lsof +L1 查看。这只是可能的解释之一,不是结论。定位到进程后,优先在维护窗口重启该服务,或者按厂商文档轮转,不要直接杀死不认识的进程。
是 Docker 容器日志占满了磁盘,可以直接清空日志文件吗?
不要直接截断 Docker 管理的日志文件,先保留故障窗口内的错误证据。用 docker system df 和 docker info --format '{{.DockerRootDir}}' 确认 Docker 数据目录所在分区,再查是哪个服务在高频刷错误。容器日志问题应该用轮转配置控制后续增长,而不是反复手动清空;只删日志、不修报错,还会再次告警。
需要帮助理解排查结果?
OpsMate(itops.sh)把 SSH 终端和 AI 放在同一页,由你核对证据。每次让 AI 帮忙看,终端里最近的输出都会一起发到云端 AI,敏感信息请先去掉。
免费开始 本地凭证桌面端