Linux 快速删除大量小文件方法
来源:互联网 发布:手机迅雷提示无网络 编辑:程序博客网 时间:2024/05/22 10:23
Linux 快速删除大量小文件方法
当我们在linux系统中要删除数万或者数十万甚至数百万的文件时使用rm -rf *就不太好用,因为要等待很长一段时间。在这种情况之下我们可以使用linux系统命令rsync来巧妙的处理。rsync实际上用的是替换原理,处理数十万个文件也是秒删。
1. rsync安装,有些系统默认安装有该命令
ubuntu系统:sudo apt-get install rsyncfedora 系统:sudo yum install rsync其他的可以源码安装,到下面的网站下载
http://rsync.samba.org
2. rsync提供了一些跟删除有关的参数
3. 示例rsync --help | grep delete--del an alias for --delete-during--delete delete extraneous files from destination dirs--delete-before receiver deletes before transfer, not during--delete-during receiver deletes during transfer (default)--delete-delay find deletions during, delete after--delete-after receiver deletes after transfer, not during--delete-excluded also delete excluded files from destination dirs--ignore-errors delete even if there are I/O errors--max-delete=NUM don't delete more than NUM files其中--delete-before接收者在传输之前进行删除操作
清空目录或文件,如下:
1、先建立一个空目录
mkdir /data/blank
2、用rsync删除目标目录
rsync --delete-before -d -a -H -v --progress --stats /data/blank/ /var/edatacache/或者rsync --delete-before -d /data/blank/ /var/edatacache/
3、也可以用来删除大文件这样/var/edatacache目录就被快速的清空了。选项说明:
–delete-before 接收者在传输之前进行删除操作
–progress 在传输时显示传输过程
-a 归档模式,表示以递归方式传输文件,并保持所有文件属性
-H 保持硬连接的文件
-v 详细输出模式
–stats 给出某些文件的传输状态-d transfer directories without recursing
假如我们在/root/下有一个几十G甚至上百G的文件data,现在我们要删除它一、创建一个空文件touch /root/empty二、用rsync清空/root/data文件
注意:rsync --delete-before -d --progess --stats /root/empty /root/data
当SRC和DEST文件性质不一致时将会报错
当SRC和DEST性质都为文件【f】时,意思是清空文件内容而不是删除文件
当SRC和DEST性质都为目录【d】时,意思是删除该目录下的所有文件,使其变为空目录
0 0
- Linux 快速删除大量小文件方法
- Linux 快速删除大量小文件方法
- Linux 快速删除大量小文件方法
- Linux 快速删除大量小文件方法
- linux下快速删除目录下大量小文件及快速复制大量小文件方法
- 快速删除大量小文件方法
- linux快速删除大量小文件
- linux快速删除大量小文件
- linux快速删除大量小文件
- 快速删除大量小文件
- linux下面快速删除大量文件及快速复制大量小文件
- linux下面快速删除大量文件及快速复制大量小文件
- linux下面快速删除大量文件及快速复制大量小文件
- linux 快速删除大量文件方法(转)
- Linux下快速删除大量文件/文件夹方法
- Linux下快速删除大量文件/文件夹方法
- linux下删除大量小文件方法汇总
- linux下面快速删除大量文件
- Python 编码小结
- java数据库连接池
- SQL的四种连接-左外连接、右外连接、内连接、全连接
- 字符串
- Struts2 拦截器Interceptor实现防止恶意登录(登录限制)
- Linux 快速删除大量小文件方法
- 深度学习Matlab工具箱代码详解
- oracle导出txt文本数据的2中方法
- 树
- 排序算法-选择类排序
- geoTools向shp文件中写数据
- Python中os与sys两模块的区别
- Ubuntu 安装 Python
- CentOS7下安装nginx与php