awk命令常用实例

本文编辑整理自：http://apps.hi.baidu.com/share/detail/6533091

1、简单

awk '/101/' file 

显示文件file中包含101的匹配行。

awk '/101/,/105/' file 

显示文件file中包含101或105的行。

awk '$1 == 5' file

显示文件file中第1个字段为5的行。

awk '$1 == "CT"' file 

显示文件file中第1个字段为CT的行

awk '$1 * $2 >100 ' file

显示文件file中第1个字段和第二个字段的乘积大于100的行

awk '$2 >5 && $2<=15' file

显示文件file中第二个字段大于5但小于等于15的行

2、字段域

awk '{print NR,NF,$1,$NF}' file 

显示文件file的当前记录号、域数和每一行的第一个和最后一个域。

awk '/101/ {print $1,$2 + 10}' file 

把文件file的中包含101的匹配行的第一个字段进行显示，并把第二个字段域加10也显示，它们之间用逗号进行分割。

awk '/101/ {print $1$2}' file

把文件file的中包含101的匹配行的第一个字段进行显示，并把第二个字段域加10也显示，但它们之间没有任何分割符。

3、管道输入

df | awk '$4>1000000 ' 

通过管道符获得输入，显示第4个字段域大于1000000的行。

4、字段域分割符

awk -F "|" '{print $1}' file 

按照新的分隔符“|”进行操作。

awk 'BEGIN { FS="[: \t|]" }

{print $1,$2,$3}' file 

通过设置分隔符变量FS="[: \t|]"使得冒号、制表格及|都将作为分割符。

Sep="|"

awk -F $Sep '{print $1}' file 

按照环境变量Sep的值做为分隔符。

awk -F '[ :\t|]' '{print $1}' file 

按照正则表达式的值做为分隔符，这里代表空格、:、TAB、|同时做为分隔符。

5、载入awk脚本命令文件

awk -f awkfile file 

载入文件awkfile的awk脚本命令来进行操作。

cat awkfile

/101/{print "\047 Hello! \047"} 

遇到匹配行以后打印 ' Hello! '.\047代表单引号。

6、行首匹配

awk '$1 ~ /101/ {print $1}' file 

显示文件中第一个域匹配101的行（记录）。

7、输出分割符

awk 'BEGIN { OFS="%"}{print $1,$2}' file 

通过设置输出分隔符（OFS="%"）修改输出格式。

8、条件表达式

awk 'BEGIN { max=100 ;print "max=" max} 

BEGIN 表示在处理任意行之前进行的操作。

{max=($1 >max ?$1:max); print $1,"Now max is "max}' file 

取得文件第一个域的最大值。这里居然是进行字符ASC码的比较。

表达式1?表达式2:表达式3 相当于：

if (表达式1)

表达式2

else

表达式3

在awk的action中也可以使用条件表达式

awk '{print ($1>4 ? "high "$1: "low "$1)}' file

9、数学操作

awk '$1 * $2 >100 {print $1}' file 

显示文件file中第1个字段和第二个字段的乘积大于100的行

10、改变字段域

awk '$1 == “Chi” {$3 = “China”; print}' file 

找到匹配行后先将第3个域替换后再显示该行（记录）。

awk '{$7 %= 3; print $7}' file 

将第7域被3除，并将余数赋给第7域再打印。

11、字段组合

awk '/tom/ {wage=$2+$3; print wage}' file 

找到匹配行后为变量wage赋值并打印该变量。

12、对匹配的记录计数

awk '/tom/ {count++;}

END {print "tom was found "count" times"}' file 

END表示在所有输入行处理完后进行处理。

13、函数调用

awk 'gsub(/\$/,"");gsub(/,/,""); cost+=$4;

END {print "The total is $" cost>"filename"}' file 

gsub函数用空串替换$和逗号，再将结果输出到filename中。

14、条件语句

awk '{gsub(/\$/,"");gsub(/,/,"");

if ($4>1000&&$4<2000) c1+=$4;

else if ($4>2000&&$4<3000) c2+=$4;

else if ($4>3000&&$4<4000) c3+=$4;

else c4+=$4; }

END {printf "c1=[%d];c2=[%d];c3=[%d];c4=[%d]\n",c1,c2,c3,c4}' file

通过if和else if完成条件语句

awk '{gsub(/\$/,"");gsub(/,/,"");

if ($4>3000&&$4<4000) exit;

else c4+=$4; }

END {printf "c1=[%d];c2=[%d];c3=[%d];c4=[%d]\n",c1,c2,c3,c4}' file

通过exit在某条件时退出，但是仍执行END操作。

awk '{gsub(/\$/,"");gsub(/,/,"");

if ($4>3000) next;

else c4+=$4; }

END {printf "c4=[%d]\n",c4}' file

通过next在某条件时跳过该行，对下一行执行操作。

15、对多个文件操作

awk '{ print FILENAME,$0 }' file1 file2 file3>fileall 

把file1、file2、file3的文件内容全部写到fileall中，并在每行以其该行源文件名作为开始

awk ' $1!=previous { close(previous); previous=$1 }

{print substr($0,index($0," ") +1)>$1}' fileall 

把合并后的文件重新分拆为3个文件。并与原文件一致。

17、getline

awk 'BEGIN {"date"|getline d; print d}' 

通过管道把date的执行结果送给getline，并赋给变量d，然后打印。

awk 'BEGIN {system("echo \"Input your name:\""); getline d;print "\nYour name is",d,"\b!\n"}'

通过getline命令交互输入name，并显示出来。

awk 'BEGIN {FS=":"; while(getline< "/etc/passwd" >0) { if($1~"050[0-9]_") print $1}}'

打印/etc/passwd文件中用户名包含050x_的用户名。

注：实验失败

18、调用系统变量

在awk中调用系统变量必须用单引号，如果是双引号，则表示字符串

Flag=abcd

awk '{print '$Flag'}' 

结果为abcd。

注：实验失败

awk '{print "$Flag"}' 

结果为$Flag

19、循环

awk '{ i=1;while(i<=NF) {print NF,$i;i++}}' file 

通过while语句实现循环。

awk '{ for(i=1;i<=NF;i++) {print NF,$i}}' file 

通过for语句实现循环。

type file|awk -F "/" '

{ for(i=1;i<=NF;i++)

{ if(i==NF) { printf "%s",$i }

else { printf "%s/",$i } }}' 

显示file这个命令的全路径。

awk 'BEGIN {

for(j=1;j<=12;j++)

{ flag=0;

printf "\n%d月份\n",j;

for(i=1;i<=31;i++)

{

if (j==2&&i>28) flag=1;

if ((j==4||j==6||j==9||j==11)&&i>30) flag=1;

if (flag==0) {printf "%02d%02d ",j,i}

}

}

}'

用for和if显示日期