查找技巧,find及xargs的使用

来源:互联网 发布:成都 出租车 网络投诉 编辑:程序博客网 时间:2024/04/29 07:00
在运行一个非常消耗资源的f i n d命令时,很多人都倾向于把它放在后台执行,因为遍历一个大的文件系统可能会花费很长的时间(这里是指3 0 G字节以上的文件系统)。

F i n d命令的一般形式为:
find pathname -options [-print -exec -ok]
该命令的参数:
pathname:  find命令所查找的目录路径。例如用.来表示当前目录,用/来表示系统根目录。-print:     find命令将匹配的文件输出到标准输出。-exec:     find命令对匹配的文件执行该参数所给出的s h e l l命令。相应命令的形式为' command' {} \;,注意{ }和\;之间的空格。-ok:       和- e x e c的作用相同,只不过以一种更为安全的模式来执行该参数所给出的s h e l l命令,在执行每一个命令之前,都会给出提示,让用户来确定是否执行。 


find命令选项

-name:按照文件名查找文件。
-perm:按照文件权限来查找文件。
-prune:使用这一选项可以使f i n d命令不在当前指定的目录中查找,如果同时使用-depth选项,那么-prune将被f i n d命令忽略。
-user: 按照文件属主来查找文件。
-group:按照文件所属的组来查找文件。

-mtime -n +n:按照文件的更改时间来查找文件, - n表示文件更改时间距现在n天以内,+ n表示文件更改时间距现在n天以前。F i n d命令还有- a t i m e和- c t i m e选项,但它们都和- m t i m e选项。

-amin n

  查找系统中最后N分钟访问的文件

  -atime n

  查找系统中最后n*24小时访问的文件

  -cmin n

  查找系统中最后N分钟被改变文件状态的文件

  -ctime n

  查找系统中最后n*24小时被改变文件状态的文件

 -mmin n

  查找系统中最后N分钟被改变文件数据的文件

  -mtime n

  查找系统中最后n*24小时被改变文件数据的文件

find . -name "*" -mmin -65 -mtime -0.1 -ctime -1


-nogroup:查找无有效所属组的文件,即该文件所属的组在/ e t c / g r o u p s中不存在。
-nouser:查找无有效属主的文件,即该文件的属主在/ e t c / p a s s w d中不存在。

-newer file1 ! file2:查找更改时间比文件f i l e 1新但比文件f i l e 2旧的文件。

-type 查找某一类型的文件,诸如:


b - 块设备文件。d - 目录。c - 字符设备文件。p - 管道文件。l - 符号链接文件。f - 普通文件。

-size n:[c] 查找文件长度为n块的文件,带有c时表示文件长度以字节计。
-depth:在查找文件时,首先查找当前目录中的文件,然后再在其子目录中查找。
-fstype:查找位于某一类型文件系统中的文件,这些文件系统类型通常可以在配置文件/ e t c / f s t a b中找到,该配置文件中包含了本系统中有关文件系统的信息。

-mount:在查找文件时不跨越文件系统m o u n t点。
-follow:如果f i n d命令遇到符号链接文件,就跟踪至链接所指向的文件。
-cpio:对匹配的文件使用c p i o命令,将这些文件备份到磁带设备中。

使用exec或ok来执行shell命令

使用find时,只要把想要的操作写在一个文件里,就可以用exec来配合find查找,很方便的(在有些操作系统中只允许- e x e c选项执行诸如l s或ls -l这样的命令)。大多数用户使用这一选项是为了查找旧文件并删除它们。建议在真正执行r m命令删除文件之前,最好先用l s命令看一下,确认它们是所要删除的文件。e x e c选项后面跟随着所要执行的命令或脚本,然后是一对儿{ },一个空格和一个\,最后是一个分号。为了使用e x e c选项,必须要同时使用p r i n t选项。如果验证一下f i n d命令,会发现该命令只输出从当前路径起的相对路径及文件名。


例如:为了用ls -l命令列出所匹配到的文件,可以把ls -l命令放在f i n d命令的- e x e c选项中

# find . -type f -exec ls -l {} \;-rw-r--r--    1 root     root        34928 2003-02-25  ./conf/httpd.conf-rw-r--r--    1 root     root        12959 2003-02-25  ./conf/magic-rw-r--r--    1 root     root          180 2003-02-25  ./conf.d/README


上面的例子中,f i n d命令匹配到了当前目录下的所有普通文件,并在- e x e c选项中使用ls -l命令将它们列出。

在/ l o g s目录中查找更改时间在5日以前的文件并删除它们

$ find logs -type f -mtime +5 -exec rm {} \;


 

记住,在s h e l l中用任何方式删除文件之前,应当先查看相应的文件,一定要小心!当使用诸如m v或r m命令时,可以使用- e x e c选项的安全模式。它将在对每个匹配到的文件进行操作之前提示你。在下面的例子中, f i n d命令在当前目录中查找所有文件名以. L O G结尾、更改时间在5日以上的文件,并删除它们,只不过在删除之前先给出提示。


 

$ find . -name "*.conf"  -mtime +5 -ok rm {} \;< rm ... ./conf/httpd.conf > ? n


按y键删除文件,按n键不删除。


任何形式的命令都可以在- e x e c选项中使用。

在下面的例子中我们使用g r e p命令。f i n d命令首先匹配所有文件名为“ passwd*”的文件,例如passwd、passwd.old、passwd.bak,然后执
行grep命令看看在这些文件中是否存在一个sam用户。

# find /etc -name "passwd*" -exec grep "sam" {} \;sam:x:501:501::/usr/sam:/bin/bash

 

使用find 命令查找某个时间段的11点到12点的shell:

awk中split的使用  

 

跟java里的split函数的用法是很相像的,举例如下:

The awk function split(s,a,sep) splits a string s into an awk array a using the delimiter sep.

set time = 12:34:56
set hr = `echo $time | awk '{split($0,a,":" ); print a[1]}'` # = 12
set sec = `echo $time | awk '{split($0,a,":" ); print a[3]}'` # = 56

# = 12 34 56
set hms = `echo $time | awk '{split($0,a,":" ); print a[1], a[2], a[3]}'`
set hms = `echo $time | awk '{split($0,a,":" ); for (i=1; i<=3; i++) print a[i]}'`

 

创建一个脚本judgetime,内容如下:

ls -l $*|awk '{split($8,hour,":";if((hour[1]>23 || hour[1] < 1)&&hour[1]<24)print}'

到要查找的目录下,运行
find ./ -name "*" -exec judgetime {} \;

注意时间格式为24小时制。

xargs




 
在使用f i n d命令的- e x e c选项处理匹配到的文件时, f i n d命令将所有匹配到的文件一起传递给e x e c执行。但有些系统对能够传递给e x e c的命令长度有限制,这样在f i n d命令运行几分钟之后,就会出现溢出错误。错误信息通常是参数列太长参数列溢出。这就是x a rg s命令的用处所在,特别是与f i n d命令一起使用。

 F i n d
命令把匹配到的文件传递给x a rg s命令,而x a rg s命令每次只获取一部分文件而不是全部,不像- e x e c选项那样。这样它可以先处理最先获取的一部分文件,然后是下一批,并如此继续下去。

 
在有些系统中,使用- e x e c选项会为处理每一个匹配到的文件而发起一个相应的进程,并非将匹配到的文件全部作为参数一次执行;这样在有些情况下就会出现进程过多,系统性能下降的问题,因而效率不高;

 
而使用x a rg s命令则只有一个进程。另外,在使用x a rg s命令时,究竟是一次获取所有的参数,还是分批取得参数,以及每一次获取参数的数目都会根据该命令的选项及系统内核中相应的可调参数来确定。
下面的例子查找系统中的每一个普通文件,然后使用x a rg s命令来测试它们分别属于哪类文件:
#find . -type f -print | xargs file
./.kde/Autostart/Autorun.desktop: UTF-8 Unicode English text
./.kde/Autostart/.directory:      ISO-8859 text\
g r e p命令在当前目录下的所有普通文件中搜索hostnames这个词:
# find . -name "*" -type f -print | xargs grep "hostnames"
./httpd1.conf:#     different IP addresses or hostnames and have them handled by the
./httpd1.conf:# VirtualHost: If you want to maintain multiple domains/hostnames
on your

3
、下面是find一些常用参数的例子:

1)、使用name选项
可以使用某种文件名模式来匹配文件,记住要用引号将文件名模式引起来。
不管当前路径是什么,如果想要在自己的根目录$ H O M E中查找文件名符合* . t x t的文件,使用~作为' p a t h n a m e参数,波浪号~代表了你的$ H O M E目录。
$ find ~ -name "*.txt" –print
想要的当前目录及子目录中查找文件名以一个大写字母开头的文件,可以用:
$ find . -name "[A-Z]*" –print

2)、用perm选项
按照文件权限模式用- p e r m选项。
如在当前目录下查找文件权限位为7 5 5的文件,即文件属主可以读、写、执行,其他用户可以读、执行的文件,可以用:
$ find . -perm 755 –print
-perm mode:
文件许可正好符合mode
-perm +mode:
文件许可部分符合mode
-perm -mode:
文件许可完全符合mode
[root@tech test]#
ll
-rwxrw
xrwx 1 root root 21 03-21 08:30 file1
-rw-r--r-- 1 root root  0 03-21 07:59 file2
[root@tech test]#
find . -type f -perm -004
./file1
./file2
[root@tech test]#
find . -type f -perm -010
./file1
文件许完全符合mode
[root@tech test]#
find . -type f -perm -014
./file1
文件许部分符合mode
[root@tech test]#
find . -type f -perm +014
./file1
./file2

3)、忽略某个目录
如果在查找文件时希望忽略某个目录,因为你知道那个目录中没有你所要查找的文件,那么可以使用- p r u n e选项来指出需要忽略的目录。在使用- p r u n e选项时要当心,因为如果你同时使用了- d e p t h选项,那么- p r u n e选项就会被f i n d命令忽略。
如果希望在/ a p p s目录下查找文件,但不希望在/ a p p s / b i n目录下查找,可以用:
$ find /apps -path "/apps/bin" -prune -o –print
这个表达式组合特例可以用伪码写为
if -path "/apps/bin "  then
          -prune
else
          -print

避开多个文件夹
$find /usr/sam \( -path /usr/sam/dir1 -o -path /usr/sam/file1 \) -prune -o –print
圆括号表示表达式的结合。
\
表示引用,即指示 shell不对后面的字符作特殊解释,而留给 find命令去解释其意义。
这个表达式组合特例可以用伪码写为
if ( -path /usr/sam/dir1 -o -path /usr/sam/file1 )  then
          -prune
else
          -print





4)、使用usernouser选项
按文件属主查找文件,如在$ H O M E目录中查找文件属主为sam的文件,可以用:
$ find ~ -user sam –print
为了查找属主帐户已经被删除的文件,可以使用- n o u s e r选项。这样就能够找到那些属主在/ e t c / p a s s w d文件中没有有效帐户的文件。在使用- n o u s e r选项时,不必给出用户名; f i n d命令能够为你完成相应的工作。
例如,希望在/ h o m e目录下查找所有的这类文件,可以用:
$ find /home -nouser –print

5) 、使用groupnogroup选项
就像u s e rn o u s e r选项一样,针对文件所属于的用户组, f i n d命令也具有同样的选项,为了在/ a p p s目录下查找属于gem用户组的文件,可以用:
$ find /apps -group gem –print
要查找没有有效所属用户组的所有文件,可以使用n o g r o u p选项。下面的f i n d命令从文件系统的根目录处查找这样的文件:
$ find / -nogroup-print

6)、按照更改时间或访问时间等查找文件
如果希望按照时间来查找文件,可以使用m t i m e,atimectime选项。如果系统突然没有可用空间了,很有可能某一个文件的长度在此期间增长迅速,这时就可以用m t i m e选项来查找这样的文件。
用减号-来限定更改时间在距今n日以内的文件,而用加号+来限定更改时间在距今n日以前的文件。
希望在系统根目录下查找更改时间在5日以内的文件,可以用:
$ find / -mtime -5 –print
find
中的 -ctime -mtime ,-atime区别?
文件的 Access timeatime是文件最后一次被读取的时间。
文件的 Modified timemtime是在写入文件时随文件内容的更改而更改的。
文件的 Change timectime是在写入文件、更改所有者、权限或链接设置时随 Inode的内容更改而更改的,即文件状态改变时更改。
Ctime
(改变)和mtime(修改)之间的区别在于是更改某个组件的标签还是更改它的内容。如果有人说chmod a-w myfile,那么这是一个改变(ctime会变,mtime不变);如果有人说echo foo >> myfile。则这是一个修改(ctimemtime都变)。ctime是文件的索引节点发生了改变;mtime是文本本身的内容发生了变化。

7)、查找比某个文件新或旧的文件
如果希望查找更改时间比某个文件新但比另一个文件旧的所有文件,可以使用- n e w e r选项。它的一般形式为:
newest_file_name ! oldest_file_name

8)、使用type选项
在当前目录下查找除目录以外的所有类型的文件,可以用:
$ find . ! -type d –print

9)、使用size选项
可以按照文件长度来查找文件,这里所指的文件长度既可以用块( b l o c k)来计量,也可以用字节来计量。以字节计量文件长度的表达形式为N c;以块计量文件长度只用数字表示即可。
在按照文件长度查找文件时,一般使用这种以字节表示的文件长度,在查看文件系统的大小,因为这时使用块来计量更容易转换。
在当前目录下查找文件长度大于1 M字节的文件:
$ find . -size +1000000c –print

10)、使用depth选项
在使用f i n d命令时,可能希望先匹配所有的文件,再在子目录中查找。使用d e p t h选项就可以使f i n d命令这样做。这样做的一个原因就是,当在使用f i n d命令向磁带上备份文件系统时,希望首先备份所有的文件,其次再备份子目录中的文件。
在下面的例子中, f i n d命令从文件系统的根目录开始,查找一个名为C O N . F I L E的文件。
它将首先匹配所有的文件然后再进入子目录中查找。
$ find / -name "CON.FILE" -depth -print

11)、使用mount选项
在当前的文件系统中查找文件(不进入其他文件系统),可以使用f i n d命令的m o u n t选项。
从当前目录开始查找位于本文件系统中文件名以X C结尾的文件:
$ find . -name "*.XC" -mount –print

12)、使用cpio选项
c p i o
命令可以用来向磁带设备备份文件或从中恢复文件。可以使用f i n d命令在整个文件系统中(更多的情况下是在部分文件系统中)查找文件,然后用c p i o命令将其备份到磁带上。
如果希望使用c p i o命令备份/ e t c/ h o m e/ a p p s目录中的文件,可以使用下面所给出的命令,不过要记住你是在文件系统的根目录下:
#cd /
#find etc home apps -depthe -print | cpio -ivcdC65535 –o
在上面的例子中,应当注意到路径中缺少/。这叫作相对路径。之所以使用相对路径,是因为在从磁带中恢复这些文件的时候,可以选择恢复文件的路径。例如,可以将这些文件先恢复到另外一个目录中,对它们进行某些操作后,再恢复到原始目录中。如果在备份时使用了绝对路径,例如/ e t c,那么在恢复时,就只能恢复到/ e t c目录中去,别无其他选择。在上面的例子中,我告诉f i n d命令首先进入/ e t c目录,然后是/ h o m e/ a p p s目录,先匹配这些目录下的文件,然后再匹配其子目录中的文件,所有这些结果将通过管道传递给c p i o命令进行备份。

查找当前用户主目录下的所有文件,下面两种方法都可以使用:

$ find $HOME -print
$ find ~ -print

为了在当前目录中文件属主具有读、写权限,并且文件所属组的用户和其他用户具有读权限的文件,可以用:

$ find . -type f -perm 644 -exec ls -l { } \;

为了查找系统中所有文件长度为0的普通文件,并列出它们的完整路径,可以用:

$ find / -type f -size 0 -exec ls -l { } \;

查找/var/logs目录中更改时间在7日以前的普通文件,并在删除之前询问它们:

$ find /var/logs -type f -mtime +7 -ok rm { } \;

为了查找系统中所有属于root组的文件,可以用:

$find . -group root -exec ls -l { } \;
-rw-r--r-- 1 root root 595 10月 31 01:09 ./fie1

下面的find命令将删除当目录中访问时间在7日以来、含有数字后缀的admin.log文件。该命令只检查三位数字,所以相应文件的后缀不要超过999。
先建几个admin.log*的文件 ,才能使用下面这个命令

$ find . -name "admin.log[0-9][0-9][0-9]" -atime -7 -okrm { } \;< rm ... ./admin.log001 > ? n< rm ... ./admin.log002 > ? n< rm ... ./admin.log042 > ? n< rm ... ./admin.log942 > ? n

在当前目录下查找所有用户具有读、写和执行权限的文件,并收回相应的写权限:

# ls -ldrwxrwxrwx 2 sam adm 4096 10月 30 20:14 file6-rwxrwxrwx 2 sam adm 0 10月 31 01:01 http3.conf-rwxrwxrwx 2 sam adm 0 10月 31 01:01 httpd.conf# find . -perm -7 -print &line; xargs chmod o-w# ls -ldrwxrwxr-x 2 sam adm 4096 10月 30 20:14 file6-rwxrwxr-x 2 sam adm 0 10月 31 01:01 http3.conf-rwxrwxr-x 2 sam adm 0 10月 31 01:01 httpd.conf

用g r e p命令在所有的普通文件中搜索hostname这个词:

# find . -type f -print &line; xargs grep "hostname"
./httpd1.conf:# different IP addresses or hostnames and have them handled by the
./httpd1.conf:# VirtualHost: If you want to maintain multiple domains/hostnames
on your

用g r e p命令在当前目录下的所有普通文件中搜索hostnames这个词:

# find . -name \* -type f -print &line; xargs grep "hostnames"
./httpd1.conf:# different IP addresses or hostnames and have them handled by the
./httpd1.conf:# VirtualHost: If you want to maintain multiple domains/hostnames
on your

注意,在上面的例子中, \用来取消find命令中的*在s h e l l中的特殊含义。


 

 

 

 
 
 
 
 
原创粉丝点击