(总结)Linux下使用rsync最快速删除海量文件的方法

转自: http://www.ha97.com/4107.html

昨天遇到了要在Linux下删除海量文件的情况,需要删除数十万个文件。这个是之前的程序写的日志,增长很快,而且没什么用。这个时候,我们常用的删除命令rm -fr * 就不好用了,因为要等待的时间太长。所以必须要采取一些非常手段。我们可以使用rsync来实现快速删除大量文件。

1、先安装rsync:
yum install rsync
2、建立一个空的文件夹:
mkdir /tmp/test
3、用rsync删除目标目录:
rsync --delete-before -a -H -v --progress --stats /tmp/test/ log/
这样我们要删除的log目录就会被清空了,删除的速度会非常快。rsync实际上用的是替换原理,处理数十万个文件也是秒删。

选项说明
–delete-before 接收者在传输之前进行删除操作
–progress 在传输时显示传输过程
-a 归档模式,表示以递归方式传输文件,并保持所有文件属性
-H 保持硬连接的文件
-v 详细输出模式
–stats 给出某些文件的传输状态

永久链接 : http://www.ha97.com/4107.html

相关文章

2 评论

  1. 钊哥,最近在研究github,它用到shell来进行操作。
    我看你上面有几个标签眼熟,比如 mkdir 应该是建立文件夹的函数吧?
    有个问题:mkdir 这个怎么称呼,是什么语言,因为我看的资料只是告诉我这么来写,但是都不明白什么意思,还有 -v -a 等等

发表评论

电子邮件地址不会被公开。 必填项已用*标注