Linux目录下有100百万个文件,如何快速删除?

在日常运维中，不少人会遇到单个目录存放几十万、上百万小文件的情况，想要批量清理时直接执行 rm -f * 会报错。

这个报错的核心原因是：系统对命令行参数的长度设有最大限制。当目录内文件数量过多，拼接生成的文件列表会超出系统阈值，命令直接执行失败。

大家可能会想到另外两种处理方式：

1. for 循环删除

for file in `ls /data/files`;do rm -f $file ;done

2. find 遍历删除

find /data/files -type f -delete

这两种方法虽然能正常执行，但执行效率很低。二者本质都是逐个遍历、逐个删除文件，系统需要频繁发起文件读写、删除调用，资源开销极大。

实测清理 100 万个小文件，耗时普遍在 30 分钟左右，还会大量占用服务器资源。

下面分享一种高效方案，能够秒级清空百万级文件：

1、先创建一个空目录

mkdir /tmp/empty

2、同步空目录，快速清空目标文件夹

rsync -av --delete /tmp/empty/ /data/files

rsync 本身是文件同步工具，搭配 --delete 参数会执行目录对齐逻辑：只要是空源目录里不存在的文件，目标目录内对应的内容都会被全部删除。相当于用空目录覆盖目标目录完成清空，无需逐一遍历删除，系统开销极低。

⚠️ 关键注意点：/tmp/empty/ 末尾的斜杠千万不能省略！带斜杠代表同步目录内部的内容；如果不带斜杠，只会同步目录本身，删除逻辑会失效。

如果不需要清空全部文件，只想清理垃圾、保留部分核心文件，可以按下面方式操作：

1、先导出需要保留的文件列表

cd /data/filesls *.txt > /tmp/safe.list

2、通过排除列表，删除清单以外的所有文件

rsync -av --delete /tmp/empty/ /data/files --exclude-from=/tmp/safe.txt

通过--exclude-from 读取留存文件清单，精准过滤保留内容，仅清理其余垃圾文件。

你还有没有更好的方法呢？欢迎评论区留言~