linux之shell学习：grep

来源：互联网发布：同济大学中德学院知乎编辑：程序博客网时间：2024/06/10 12:22

用‘grep’搜索文本文件
如果您要在几个文本文件中查找一字符串，可以使用‘grep’命令。‘grep’在文本中搜索指定的字符串。举个例子：假设您正在‘/usr/src/linux/Documentation’目录下搜索带字符串‘magic’的文件：

$ grep magic /usr/src/linux/Documentation/*
sysrq.txt:* How do I enable the magic SysRQ key?

sysrq.txt:* How do I use the magic SysRQ key?

其中文件‘sysrp.txt’包含该字符串，讨论的是 SysRQ 的功能。

默认情况下，‘grep’只搜索当前目录。如果此目录下有许多子目录，‘grep’会以如下形式列出：
grep: sound: Is a directory
这可能会使‘grep’的输出难于阅读。这里有两种解决的办法：
明确要求搜索子目录：grep -r
忽略子目录：grep -d skip

当然，如果预料到有许多输出，您可以通过管道
将其转到‘less’上阅读：
$ grep magic /usr/src/linux/Documentation/* | less
这样，您就可以更方便地阅读。
有一点要注意，您必需提供一个文件过滤方式（搜索全部文件的话用*）。如果您忘了，‘grep’会一直等着，直到该程序被中断。如果您遇到了这样的情况，按ctrl+c，然后再试。（important!!）

下面是一些有意思的命令行参数：
grep -i pattern files：不区分大小写地搜索。默认情况区分大小写，
grep -l pattern files ：只列出匹配的文件名，
grep -L pattern files ：列出不匹配的文件名，
grep -w pattern files：只匹配整个单词，而不是字符串的一部分（如匹配‘magic’，而不是‘magical’），
grep -C number pattern files：匹配的上下文分别显示[number]行，
grep pattern1 | pattern2 files ：显示匹配 pattern1 或 pattern2的行，
grep pattern1 files | grep pattern2 ：显示既匹配 pattern1 又匹配pattern2 的行。

这里还有些用于搜索的特殊符号：
\< 和 \> 分别标注单词的开始与结尾。
例如：
grep man * 会匹配 ‘Batman’、‘manic’、‘man’等，
grep '\<man' * 匹配‘manic’和‘man’，但不是‘Batman’，
grep '\<man\>' 只匹配‘man’，而不是‘Batman’或‘manic’等其他的字符串。

'^'：指匹配的字符串在行首，
'$'：指匹配的字符串在行尾，
如果您不习惯命令行参数，可以试试图形界面的‘grep’，如 reXgrep 。这个软件提供 AND、OR、NOT 等语法，还有漂亮的按钮 :-) 。如果您只是需要更清楚的输出，不妨试试 fungrep 。

Grep的常用命令语法1. 双引号引用和单引号引用
在g r e p命令中输入字符串参数时，最好将其用双引号括起来。例如：”m y s t r i n g”。这样做有两个原因，一是以防被误解为 s h e l l命令，二是可以用来查找多个单词组成的字符串，例如：”jet plane”，如果不用双引号将其括起来，那么单词 p l a n e将被误认为是一个文件，查询结果将返回”文件不存在”的错误信息。
在调用变量时，也应该使用双引号，诸如： g r e p”$ M Y VA R”文件名，如果不这样，将
没有返回结果。
在调用模式匹配时，应使用单引号.[root@mypc ]# echo `grep 123 111.txt` (#注意是反单引号)

2. 常用的g r e p选项有：
-c   只输出匹配行的计数。
-i   不区分大小写（只适用于单字符）。
-h   查询多文件时不显示文件名。
-l   查询多文件时只输出包含匹配字符的文件名。
-n   显示匹配行及行号。
-s   不显示不存在或无匹配文本的错误信息。
-v   显示不包含匹配文本的所有行。

3. 特殊的–在多个文件中进行查询
$ grep “sort”*.doc     ( #在当前目录下所有. d o c文件中查找字符串”s o r t”)

$ grep “sort it” *      (#或在所有文件中查询单词”sort it”)
接下来的所有示例是指在单个文件中进行查询
4. 行匹配
$ grep -c “48″ data.f
$ 4                      (#g r e p返回数字4，意义是有4行包含字符串”4 8″。)
$ grep “48″ data.f          (#显示包含”4 8″字符串的4行文本)

5. 显示满足匹配模式的所有行行数：
[root@mypc oid2000]# grep -n 1234 111.txt
1:1234
3:1234ab

6. 精确匹配
[root@mypc oid2000]# grep “1234\>” 111.txt
1234

7. 查询空行，查询以某个条件开头或者结尾的行。
结合使用^和$可查询空行。使用- n参数显示实际行数
[root@mypc oid2000]# grep -n “^$” 111.txt (返回结果 2: #说明第二行是空行)
[root@mypc oid2000]# grep -n “^abc” 111.txt （#查询以abc开头的行）
[root@mypc oid2000]# grep -n “abc$” 111.txt (#查询以abc结尾的行)

8. 匹配特殊字符,查询有特殊含义的字符，诸如$ . ‘ ” * [] ^ | \ + ? ,必须在特定字符前加\。
[root@mypc oid2000]# grep “\.” 111.txt (#在111.txt中查询包含”.”的所有行)
[root@mypc oid2000]# grep “my\.conf” 111.txt (#查询有文件名my. c o n f的行)

9. 目录的查询
[root@mypc oid2000]# ls -l |grep “^d” (#如果要查询目录列表中的目录)
[root@mypc oid2000]# ls -l |grep “^d[d]“ (#在一个目录中查询不包含目录的所有文件)

[root@mypc]# ls -l |grpe “^d…..x..x” (#查询其他用户和用户组成员有可执行权限的目录集合)

扩展grep(grep -E 或者 egrep)：
   使用扩展grep的主要好处是增加了额外的正则表达式元字符集。下面我们还是继续使用实例来演示扩展grep。
   /> egrep 'NW|EA' testfile     #打印所有包含NW或EA的行。如果不是使用egrep，而是grep，将不会有结果查出。
   northwest       NW      Charles Main       3.0     .98     3       34
   eastern         EA      TB Savage          4.4     .84     5       20

   /> grep 'NW\|EA' testfile     #对于标准grep，如果在扩展元字符前面加\，grep会自动启用扩展选项-E。
   northwest       NW      Charles Main       3.0     .98     3       34
   eastern           EA       TB Savage          4.4     .84     5       20

    /> egrep '3+' testfile
   /> grep -E '3+' testfile
   /> grep '3\+' testfile        #这3条命令将会打印出相同的结果，即所有包含一个或多个3的行。
   northwest       NW      Charles Main       3.0     .98     3       34
   western          WE      Sharon Gray        5.3     .97     5       23
   northeast        NE       AM Main Jr.           5.1     .94     3       13
   central            CT       Ann Stephens       5.7     .94     5       13

   /> egrep '2\.?[0-9]' testfile
   /> grep -E '2\.?[0-9]' testfile
   /> grep '2\.\?[0-9]' testfile #首先含有2字符，其后紧跟着0个或1个点，后面再是0和9之间的数字。
   western         WE       Sharon Gray        5.3     .97     5       23
   southwest      SW      Lewis Dalsass        2.7     .8      2       18
   eastern          EA       TB Savage             4.4     .84     5       20

   /> egrep '(no)+' testfile
   /> grep -E '(no)+' testfile
   /> grep '$no$\+' testfile   #3个命令返回相同结果，即打印一个或者多个连续的no的行。
   northwest       NW      Charles Main       3.0     .98     3       34
   northeast        NE       AM Main Jr.        5.1     .94     3       13
   north              NO      Margot Weber      4.5     .89     5       9

   /> grep -E '\w+\W+[ABC]' testfile #首先是一个或者多个字母，紧跟着一个或者多个非字母数字，最后一个是ABC中的一个。
   northwest       NW     Charles Main       3.0     .98     3       34
   southern        SO      Suan Chin          5.1     .95     4       15
   northeast       NE      AM Main Jr.        5.1     .94     3       13
   central           CT      Ann Stephens      5.7     .94     5       13

   /> egrep '[Ss](h|u)' testfile
   /> grep -E '[Ss](h|u)' testfile
   /> grep '[Ss]$h\|u$' testfile   #3个命令返回相同结果，即以S或s开头，紧跟着h或者u的行。
   western         WE      Sharon Gray       5.3     .97     5       23
   southern        SO      Suan Chin          5.1     .95     4       15

grep命令是linux下的行过滤工具，其参数繁多，下面就一一介绍个个参数的作用，希望对大家有所帮助。

grep -- print lines matching a pattern (将符合样式的该行列出)

◎语法: grep [options]
PATTERN [FILE...]
grep用以在file内文中比对相对应的部分，或是当没有指定档案时，
由标准输入中去比对。在预设的情况下，grep会将符合样式的那一行列出。

此外，还有两个程序是grep的变化型，egrep及fgrep。
其中egrep就等同于grep -E ，fgrep等同于grep -F 。

◎参数
   1. -A NUM，--after-context=NUM
            除了列出符合行之外，并且列出后NUM行。

      ex: $ grep -A 1 panda file
            (从file中搜寻有panda样式的行，并显示该行的后1行)

   2. -a或--text
            grep原本是搜寻文字文件，若拿二进制的档案作为搜寻的目标，
            则会显示如下的讯息: Binary file 二进制文件名 matches 然后结束。

            若加上-a参数则可将二进制档案视为文本文件搜寻，
            相当于--binary-files=text这个参数。

      ex: (从二进制档案mv中去搜寻panda样式)
            (错误!!!)
            $ grep panda mv
            Binary file mv matches
            (这表示此档案有match之处，详见--binary-files=TYPE )
            $
            (正确!!!)
            $ grep -a panda mv

   3. -B NUM，--before-context=NUM
            与 -A NUM 相对，但这此参数是显示除符合行之外
            并显示在它之前的NUM行。

      ex: (从file中搜寻有panda样式的行，并显示该行的前1行)
            $ grep -B 1 panda file

   4. -C [NUM], -NUM, --context[=NUM]
            列出符合行之外并列出上下各NUM行，默认值是2。

      ex: (列出file中除包含panda样式的行外并列出其上下2行)
            (若要改变默认值，直接改变NUM即可)
            $ grep -C[NUM] panda file

   5. -b, --byte-offset
            列出样式之前的内文总共有多少byte ..

         ex:  $ grep -b panda file
      显示结果类似于:
      0:panda
      66:pandahuang
      123:panda03

   6. --binary-files=TYPE
            此参数TYPE预设为binary(二进制)，若以普通方式搜寻，只有2种结果:
               1.若有符合的地方：显示Binary file 二进制文件名 matches
               2.若没有符合的地方：什么都没有显示。

            若TYPE为without-match，遇到此参数，
            grep会认为此二进制档案没有包含任何搜寻样式，与-I 参数相同。

            若TPYE为text, grep会将此二进制文件视为text档案，与-a 参数相同。

   Warning: --binary-files=text 若输出为终端机，可能会产生一些不必要的输出。

   7. -c, --count
      不显示符合样式行，只显示符合的总行数。
      若再加上-v,--invert-match，参数显示不符合的总行数。

   8. -d ACTION, --directories=ACTION
            若输入的档案是一个资料夹，使用ACTION去处理这个资料夹。
      预设ACTION是read(读取)，也就是说此资料夹会被视为一般的档案；
      若ACTION是skip(略过)，资料夹会被grep略过：
      若ACTION是recurse(递归)，grep会去读取资料夹下所有的档案，
      此相当于-r 参数。

   9.  -E, --extended-regexp
      采用规则表示式去解释样式。

10.  -e PATTERN, --regexp=PATTERN
      把样式做为一个partern，通常用在避免partern用-开始。

11.  -f FILE, --file=FILE
      事先将要搜寻的样式写入到一个档案，一行一个样式。
      然后采用档案搜寻。
      空的档案表示没有要搜寻的样式，因此也就不会有任何符合。

ex: (newfile为搜寻样式文件)
   $grep -f newfile file

12.  -G, --basic-regexp
      将样式视为基本的规则表示式解释。(此为预设)

13.  -H, --with-filename
      在每个符合样式行前加上符合的文件名称，若有路径会显示路径。

ex: (在file与testfile中搜寻panda样式)
   $grep -H panda file ./testfile
            file:panda
               ./testfile:panda
               $

14.  -h, --no-filename
            与-H参数相类似，但在输出时不显示路径。

15.  --help
            产生简短的help讯息。

16.  -I
            grep会强制认为此二进制档案没有包含任何搜寻样式，
            与--binary-files=without-match参数相同。

         ex:  $ grep -I panda mv

17.  -i, --ignore-case
            忽略大小写，包含要搜寻的样式及被搜寻的档案。

         ex:  $ grep -i panda mv

18.  -L, --files-without-match
            不显示平常一般的输出结果，反而显示出没有符合的文件名称。

19.  -l, --files-with-matches
            不显示平常一般的输出结果，只显示符合的文件名称。

20.  --mmap
            如果可能，使用mmap系统呼叫去读取输入，而不是预设的read系统呼叫。
            在某些状况，--mmap 能产生较好的效能。然而，--mmap
            如果运作中档案缩短，或I/O 错误发生时，
            可能造成未定义的行为(包含core dump)，。

21.  -n, --line-number
            在显示行前，标上行号。

         ex:  $ grep -n panda file
               显示结果相似于下:
               行号:符合行的内容

22.  -q, --quiet, --silent
            不显示任何的一般输出。请参阅-s或--no-messages

23.  -r, --recursive
      递归地，读取每个资料夹下的所有档案，此相当于 -d recsuse 参数。

24.  -s, --no-messages
      不显示关于不存在或无法读取的错误讯息。

小注: 不像GNU grep，传统的grep不符合POSIX.2协议，
      因为缺乏-q参数，且他的-s 参数表现像GNU grep的 -q 参数。
      Shell 倾向将传统的grep移植，避开-q及-s参数，
      且将输出限制到/dev/null。

POSIX: 定义UNIX及UNIX-like系统需要提供的功能。

25.  -V, --version
显示出grep的版本号到标准错误。
当您在回报有关grep的bugs时，grep版本号是必须要包含在内的。

26.  -v, --invert-match
显示除搜寻样式行之外的全部。

27.  -w, --word-regexp
         将搜寻样式视为一个字去搜寻，完全符合该"字"的行才会被列出。

28.  -x, --line-regexp
将搜寻样式视为一行去搜寻，完全符合该"行"的行才会被列出。

   /> egrep 'w(es)t.*\1' testfile    #west开头，其中es为\1的值，后面紧跟着任意数量的任意字符，最后还有一个es出现在该行。
   northwest       NW      Charles Main       3.0     .98     3       34

0 0