shell脚本---查找并删除重复的文件

来源:互联网 发布:宇宙中的生命 知乎 编辑:程序博客网 时间:2024/05/17 21:47
#! /bin/bash

ls -lS | awk 'BEGIN {
getline;getline;
name1=$8;size=$5 } 
{ name2=$8;
if (size==$5)
{


md5sum name1 | getline; md51=$1;
md5sum name2 | getline; md52=$1;
if ( md51==md52 )
{print name1;print name2 }
};
name1=name2;size=$5;
}' | sort -u > file1
cat file1 | xargs -I {} md5sum {} | sort | uniq -w 32 | awk ' { print $2 }' | sort -u > file2
echo Removing ... ...
comm file1 file2 -2 -3 | tee /dev/stderr |xargs rm

echo Remove completed!

运行结果:


程序来源:Linux shell脚本攻略