sed详解

sed介绍

sed是一种流编辑器，它是文本处理中非常中的工具，能够完美的配合正则表达式使用，功能不同凡响。处理时，把当前处理的行存储在临时缓冲区中，称为“模式空间”（pattern
space），接着用sed命令处理缓冲区中的内容，处理完成后，把缓冲区的内容送往屏幕。接着处理下一行，这样不断重复，直到文件末尾。文件内容并没有
改变，除非你使用重定向存储输出。Sed主要用来自动编辑一个或多个文件；简化对文件的反复操作；编写转换程序等。

• 命令语法
  sed [options] ‘command’ filename
  sed [options] -f scriptfile filename

• 命令描述
  使用sed可以实现grep的大部分功能，而且还可以查找替换指定字符。

• 命令选项
  p 打印出一个文件的全部内容；
  -n 选项-n和p命令一起使用表示显示script处理后的结果；
  -e 在一行中同时使用多个条件；
  -r 代表脱义符\;
  -e 在一行命令中同时有多个条件是使用-e选项 ;

实战（上）

1.打印包含某个字符串的行

[root@localhost sed]# sed -n '/root/'p test.txt    //这里的p命令是打印输出， -n选项在有匹配条件的时候需要加上root:x:0:0:root:/root:/bin/bashoperator:x:11:0:operator:/root:/sbin/nologin[root@localhost sed]# sed -n '/r.t/'p test.txt    operator:x:11:0:operator:/root:/sbin/nologinsshd:x:74:74:Privilege-separated SSH:/var/empty/sshd:/sbin/nologin[root@localhost sed]# sed -n '/r*t/'p test.txtroot:x:0:0:root:/root:/bin/bashshutdown:x:6:0:shutdown:/sbin:/sbin/shutdownhalt:x:7:0:halt:/sbin:/sbin/haltoperator:x:11:0:operator:/root:/sbin/nologinftp:x:14:50:FTP User:/var/ftp:/sbin/nologinsystemd-bus-proxy:x:999:997:systemd Bus Proxy:/:/sbin/nologinsystemd-network:x:192:192:systemd Network Management:/:/sbin/nologindbus:x:81:81:System message bus:/:/sbin/nologinpolkitd:x:998:996:User for polkitd:/:/sbin/nologintss:x:59:59:Account used by the trousers package to sandbox the tcsd daemon:/dev/null:/sbin/nologinpostfix:x:89:89::/var/spool/postfix:/sbin/nologinsshd:x:74:74:Privilege-separated SSH:/var/empty/sshd:/sbin/nologin[root@localhost sed]# sed -nr '/r+o/'p test.txt    //这里的r命令，代表这“/”脱义。如果不加r命令可以写成 sed -n '/r\+o/'p test.txtroot:x:0:0:root:/root:/bin/bashoperator:x:11:0:operator:/root:/sbin/nologinsystemd-bus-proxy:x:999:997:systemd Bus Proxy:/:/sbin/nologintss:x:59:59:Account used by the trousers package to sandbox the tcsd daemon:/dev/null:/sbin/nologinchrony:x:997:995::/var/lib/chrony:/sbin/nologin[root@localhost sed]# sed -nr '/o{2}/'p test.txt    //匹配两次带0的列root:x:0:0:root:/root:/bin/bashlp:x:4:7:lp:/var/spool/lpd:/sbin/nologinmail:x:8:12:mail:/var/spool/mail:/sbin/nologinoperator:x:11:0:operator:/root:/sbin/nologinpostfix:x:89:89::/var/spool/postfix:/sbin/nologin[root@localhost sed]# sed -nr '/root|bus/'p test.txt    //匹配带有root或者bus的列root:x:0:0:root:/root:/bin/bashoperator:x:11:0:operator:/root:/sbin/nologinsystemd-bus-proxy:x:999:997:systemd Bus Proxy:/:/sbin/nologindbus:x:81:81:System message bus:/:/sbin/nologin

2.打印指定的行

[root@localhost sed]# sed -n '2'p test.txt    //打印test.txt文件的第2行12222:1o:1:bin[root@localhost sed]# sed -n '2,5'p test.txt    //打印test.txt文件的第2行到第2行12222:1o:1:binasdfasd:rao:111f22222:r>o:asdfasdfbin:x:1:1:bin:/bin:/sbin/nologin[root@localhost sed]# sed -n '25,$'p test.txt    //打印test.txt文件的25行到末尾(这里的$代表末尾)sshd:x:74:74:Privilege-separated SSH:/var/empty/sshd:/sbin/nologinchrony:x:997:995::/var/lib/chrony:/sbin/nologinuser1:x:1000:1000::/home/user1:/bin/bashuser2:x:1001:1002::/home/user2:/bin/bashdd1:x:1002:1004::/home/dd1:/bin/bashuser4:x:1005:1003::/home/user4:/bin/bashuser5:x:1010:1003::/home/dd1:/sbin/nologinuser11:x:1011:1011::/home/user11:/bin/bash[root@localhost sed]# sed '/ss/'p test.txt    //打印test.txt文件的全部内容。或者使用 sed -n '1,$'p test.txt mail:x:8:12:mail:/var/spool/mail:/sbin/nologinoperator:x:11:0:operator:/root:/sbin/nologinoperator:x:11:0:operator:/root:/sbin/nologingames:x:12:100:games:/usr/games:/sbin/nologingames:x:12:100:games:/usr/games:/sbin/nologinftp:x:14:50:FTP User:/var/ftp:/sbin/nologinftp:x:14:50:FTP User:/var/ftp:/sbin/nologinnobody:x:99:99:Nobody:/:/sbin/nologinnobody:x:99:99:Nobody:/:/sbin/nologin...........................

3.使用-e选项一条命令同时有多个条件

[root@localhost sed]# sed -e '1'p -e '/bus/'p -n test.txtroot:x:0:0:root:/root:/bin/bashsystemd-bus-proxy:x:999:997:systemd Bus Proxy:/:/sbin/nologindbus:x:81:81:System message bus:/:/sbin/nologin

说明: sed -e ‘1’p -e ‘/bus/’p -n test.txt 命令 1 是指打印第一行 ； bus
是指匹配带有bus的列；
-e 的作用是一条命令同时可以有多个条件。

---

[root@localhost sed]# sed -e '1'p -e '/root/'p -n test.txtroot:x:0:0:root:/root:/bin/bashroot:x:0:0:root:/root:/bin/bashoperator:x:11:0:operator:/root:/sbin/nologin

说明：可以看出打印出来的结果第1行和第2行是重复的。其中第1行是 命令中 -e ‘1’p 的结果，第2,3行是 -e’/root/’p
的结果。 当打印的内容和匹配的内容相同时，会分别显示，互不影响。

实战（下）

• 命令 I 忽略大小写

[root@localhost sed]# sed -n '/dll/'Ip test.txtbin:x:1:1:bin:/bin:/sbin/nologin/dlldaemon:x:2:2:daemon:/sbin:/sbin/nologin/Dll

4.命令d 在屏幕上删除指定的行

[root@localhost sed]# wc -l test.txt    //查询文件的行数32 test.txt[root@localhost sed]# sed '1,25'd test.txt    //使用命令d删除1到25行的内容。（注意仅仅是在屏幕中删除，实际并没有真正的删除）chrony:x:997:995::/var/lib/chrony:/sbin/nologinuser1:x:1000:1000::/home/user1:/bin/bashuser2:x:1001:1002::/home/user2:/bin/bashdd1:x:1002:1004::/home/dd1:/bin/bashuser4:x:1005:1003::/home/user4:/bin/bashuser5:x:1010:1003::/home/dd1:/sbin/nologinuser11:x:1011:1011::/home/user11:/bin/bash[root@localhost sed]# wc -l test.txt    //查询文件的行数32 test.txt

5.选项-i真实永久的删除文件的指定内容

[root@localhost sed]# wc -l test.txt           //查询文件的行数32 test.txt[root@localhost sed]# sed -i '1,25'd test.txt        //删除test.txt文件中的1到25行。[root@localhost sed]# wc -l test.txt           //查看行数7 test.txt[root@localhost sed]# sed -i '/nologin/'d test.txt[root@localhost sed]# wc -l test.txt13 test.txt

6.替换字符或字符串

[root@localhost sed]# sed '1,10s/root/toor/'g test.txt    //在屏幕上替换root为toor并打印（在真实的test.txt文件中并没有真的替换） 这里的1，10是指前10行toor:x:0:0:toor:/toor:/bin/bash12222:1o:1:binasdfasd:rao:111f22222:r>o:asdfasdfbin:x:1:1:bin:/bin:/sbin/nologin/dll222222:r.o1o:asdfasdasdfasdf:ol:ddddaemon:x:2:2:daemon:/sbin:/sbin/nologin/Dlladm:x:3:4:adm:/var/adm:/sbin/nologinlp:x:4:7:lp:/var/spool/lpd:/sbin/nologinsync:x:5:0:sync:/sbin:/bin/syncshutdown:x:6:0:shutdown:/sbin:/sbin/shutdownhalt:x:7:0:halt:/sbin:/sbin/halt[root@localhost sed]# sed -r  '1,10s/ro+/ro/'g test.txt |head -10rot:x:0:0:rot:/rot:/bin/bash12222:1o:1:binasdfasd:rao:111f22222:r>o:asdfasdfbin:x:1:1:bin:/bin:/sbin/nologin/dll222222:r.o1o:asdfasdasdfasdf:ol:ddddaemon:x:2:2:daemon:/sbin:/sbin/nologin/Dlladm:x:3:4:adm:/var/adm:/sbin/nologinlp:x:4:7:lp:/var/spool/lpd:/sbin/nologin

上例中的 ‘s’ 就是替换的命令， ‘g’ 为本行中全局替换，如果不加 ‘g’ 只换该行中出现的第一个。除了可以使用 ‘/’
作为分隔符外，还可以使用其他特殊字符例如 ‘#’ 或者 ‘@’ 都没有问题。

7.真实永久的替换文件的内容（注意加-i选项）

[root@localhost sed]# sed -i ‘s/ot/to/g’ test.txt | head -n5 test.txt //由于文件过长，这里只查看前5行
rtoo:x:0:0:rtoo:/rtoo:/bin/bash
12222:1o:1:bin
asdfasd:rao:111
f22222:r>o:asdfasdf
bin:x:1:1:bin:/bin:/sbin/nologin/dll

这样就可以直接更改test.txt文件中的内容了。

8.调换两个字符串的位置

[root@localhost sed]# head -5 test.txtroot:x:0:0:root:/root:/bin/bash12222:1o:1:binasdfasd:rao:111f22222:r>o:asdfasdfbin:x:1:1:bin:/bin:/sbin/nologin/dll[root@localhost sed]# head -5 test.txt |sed -r 's/([^:]+):(.*):([^:]+)/\3:\2:\1/'/bin/bash:x:0:0:root:/root:rootbin:1o:1:12222111:rao:asdfasdasdfasdf:r>o:f22222/sbin/nologin/dll:x:1:1:bin:/bin:bin

说明：上例中用 () 把所想要替换的字符括起来成为一个整体，因为括号在sed中属于特殊符号，所以需要在前面加脱意字符 ‘’, 替换时则写成
‘1’, ‘‘2’, ‘‘3’ 的形式。

9.在屏幕上指定替换文件中的内容

[root@localhost sed]# head test.txt    //没有替换前的内容root:x:0:0:root:/root:/bin/bash12222:1o:1:binasdfasd:rao:111f22222:r>o:asdfasdfbin:x:1:1:bin:/bin:/sbin/nologin/dll222222:r.o1o:asdfasdasdfasdf:ol:ddddaemon:x:2:2:daemon:/sbin:/sbin/nologin/Dlladm:x:3:4:adm:/var/adm:/sbin/nologinlp:x:4:7:lp:/var/spool/lpd:/sbin/nologin[root@localhost sed]# head test.txt|sed 's/\/root/123/g'    //把/root替换成123，这里的\是脱义root:x:0:0:root:123:/bin/bash12222:1o:1:binasdfasd:rao:111f22222:r>o:asdfasdfbin:x:1:1:bin:/bin:/sbin/nologin/dll222222:r.o1o:asdfasdasdfasdf:ol:ddddaemon:x:2:2:daemon:/sbin:/sbin/nologin/Dlladm:x:3:4:adm:/var/adm:/sbin/nologinlp:x:4:7:lp:/var/spool/lpd:/sbin/nologin

10.真实永久的的替换文件中的内容（注意加-i）

[root@localhost sed]# sed -i 's/\/root/123/g' test.txt[root@localhost sed]# head test.txtroot:x:0:0:root:123:/bin/bash12222:1o:1:binasdfasd:rao:111f22222:r>o:asdfasdfbin:x:1:1:bin:/bin:/sbin/nologin/dll222222:r.o1o:asdfasdasdfasdf:ol:ddddaemon:x:2:2:daemon:/sbin:/sbin/nologin/Dlladm:x:3:4:adm:/var/adm:/sbin/nologinlp:x:4:7:lp:/var/spool/lpd:/sbin/nologin

11.在屏幕上把文件上的字母替换成空的（注意如果加上-i选项，这就真实永久的替换文件中的内容了）

[root@localhost sed]# head test.txt |sed 's/[a-zA-Z]//g'::0:0::123://12222:1:1:::11122222:>:::1:1::/:///222222:.1:::::2:2::/:///::3:4:://://

12.在所有的行的最前面加上固定的字符串（注意加-r）

[root@localhost sed]# head test.txt |sed -r 's/(.*)/aaa.&/'   //还有一种方法 head test.txt |sed -r 's/^/aaa.&/'aaa.::0:0::123://aaa.12222:1:1:aaa.::111aaa.22222:>:aaa.::1:1::/:///aaa.222222:.1:aaa.::aaa.::2:2::/:///aaa.::3:4:://://aaa.::4:7::///://

总结

• I命令表示匹配的结果不区分大小写
• p命令是打印输出。
• -r选项，代表这“/”脱义。
• -n选项在有匹配条件的时候需要加上
• -e 在一行命令中同时有多个条件是使用-e选项
• d 这个命令是在屏幕上删除某行或多行，要想真实删除到文件中需要加-i选项。所以在修改前最好先复制一下文件以免改错。
• s 就是替换的命令
• g为本行中全局替换。
• \，#，@ 可以作为分隔符，如sed ‘s@/sbin/nologin@123@g’
• ^ 匹配行开始，如：/^sed/匹配所有以sed开头的行。
• $ 匹配行结束。
• . 匹配一个非换行符的任意字符，如：/s.d/匹配s后接一个任意字符，最后是d。
• *匹配0个或多个字符，如：/*sed/匹配所有模板是一个或多个空格后紧跟sed的行。
• []匹配一个指定范围内的字符，如/[ss]ed/匹配sed和Sed。
• [^]匹配一个不在指定范围内的字符，如：/[^A-RT-Z]ed/匹配不包含A-R和T-Z的一个字母开头，紧跟ed的行。
• 匹配单词的结束，如/love>/匹配包含以love结尾的单词的行。
• x{m}重复字符x，m次，如：/0{5}/匹配包含5个0的行。
• x{m,}重复字符x，至少m次，如：/0{5,}/匹配至少有5个0的行。
• x{m,n}重复字符x，至少m次，不多于n次，如：/0{5,10}/匹配5~10个0的行。