Linux 快速删除大量小文件方法

当咱们在linux系统中要删除数万或者数十万甚至数百万的文件时使用rm -rf *就不太好用,由于要等待很长一段时间。在这种状况之下咱们可使用linux系统命令rsync来巧妙的处理。rsync实际上用的是替换原理,处理数十万个文件也是秒删。 linux

1. rsync安装,有些系统默认安装有该命令
Ubuntu系统:sudo apt-get install rsync
Fedora 系统:sudo yum install rsync
其余的能够源码安装,到下面的网站下载http://rsync.samba.org 网站


2. rsync提供了一些跟删除有关的参数 递归

rsync --help | grep delete
    --del                                an alias for --delete-during
    --delete                          delete extraneous files from destination dirs
    --delete-before            receiver deletes before transfer, not during
    --delete-during            receiver deletes during transfer (default)
    --delete-delay              find deletions during, delete after
    --delete-after                receiver deletes after transfer, not during
    --delete-excluded        also delete excluded files from destination dirs
    --ignore-errors            delete even if there are I/O errors
    --max-delete=NUM    don't delete more than NUM files
其中--delete-before接收者在传输以前进行删除操做 get


    3. 示例
清空目录或文件,以下:
一、先创建一个空目录 源码

mkdir /data/blank
二、用rsync删除目标目录 it

rsync --delete-before -d -a -H -v --progress --stats /data/blank/ /var/edatacache/
或者
rsync --delete-before -d /data/blank/ /var/edatacache/ io


这样/var/edatacache目录就被快速的清空了。 原理


选项说明:
–delete-before 接收者在传输以前进行删除操做
–progress          在传输时显示传输过程
-a                      归档模式,表示以递归方式传输文件,并保持全部文件属性
-H                      保持硬链接的文件
-v                      详细输出模式
–stats                给出某些文件的传输状态
-d                      transfer directories without recursing file


三、也能够用来删除大文件
假如咱们在/root/下有一个几十G甚至上百G的文件data,如今咱们要删除它
1、建立一个空文件
    touch /root/empty
2、用rsync清空/root/data文件
    rsync --delete-before -d --progess --stats /root/empty /root/data 下载

注意: 当SRC和DEST文件性质不一致时将会报错 当SRC和DEST性质都为文件【f】时,意思是清空文件内容而不是删除文件 当SRC和DEST性质都为目录【d】时,意思是删除该目录下的全部文件,使其变为空目录

相关文章
相关标签/搜索