linux的awk详情（上）

一丶awk介绍

AWK是一种处理文本文件的语言，是一个强大的文本分析工具，可以报告生成器，格式化文本输出
1.常用语法

awk [options] ‘program’ var=value file…
awk [options] -f programfile var=value file…
awk [options] 'BEGIN{ action;… } pattern{ action;… } END{ action;… }' file ...

2.常用选项

-F 指明输入时用到的字段分隔符
-v var=value: 自定义

3.基本格式

awk [options] 'program' file…
program:pattern{action statements;..}
pattern和action：
• pattern部分决定动作语句何时触发及触发事件
BEGIN,END
• action statements对数据进行处理，放在{}内指明
print, printf

（#要点
(1) 逗号分隔符
(2) 输出的各item可以字符串，也可以是数值；当前记录的字段、
变量或awk的表达式
(3) 如省略item，相当于print $0）

例：

~]# awk '{print "hello,awk"}'
~]# awk –F: '{print}' /etc/passwd
~]# awk –F: ‘{print “wang”}’ /etc/passwd
~]# awk –F: ‘{print $1}’ /etc/passwd
~]# awk –F: ‘{print $0}’ /etc/passwd
~]# awk –F: ‘{print $1”\t”$3}’ /etc/passwd
~]# awk -F: '{printf "username:%-20s salary:%-10.2f shell:%s\n",$1,$3,$7}' /etc/passwd
~]# tail -3 /etc/fstab |awk '{print $2,$4}'

4.变量

变量：内置和自定义变量

FS：输入字段分隔符，默认为空白字符
awk -v FS=':' '{print $1,FS,$3}’ /etc/passwd
awk –F: '{print $1,$3,$7}’ /etc/passwd
OFS：输出字段分隔符，默认为空白字符
awk -v FS=‘:’ -v OFS=‘:’ '{print $1,$3,$7}’ /etc/passwd
RS：输入记录分隔符，指定输入时的换行符，原换行符仍有效
awk -v RS=' ' ‘{print }’ /etc/passwd
ORS：输出记录分隔符，输出时用指定符号代替换行符
awk -v RS=' ' -v ORS='###'‘{print }’ /etc/passwd
NF：字段数量
awk -F： ‘{print NF}’ /etc/fstab （#引用内置变量不用$）
awk -F: '{print $(NF-1)}' /etc/passwd
NR：行号
awk '{print NR}' /etc/fstab ; awk END'{print NR}' /etc/fstab
FNR：各文件分别计数,行号
awk '{print FNR}' /etc/fstab /etc/inittab
FILENAME：当前文件名
awk '{print FILENAME}’ /etc/fstab
ARGC：命令行参数的个数
awk '{print ARGC}’ /etc/fstab /etc/inittab
awk ‘BEGIN {print ARGC}’ /etc/fstab /etc/inittab
ARGV：数组，保存的是命令行所给定的各参数
awk ‘BEGIN {print ARGV[0]}’ /etc/fstab /etc/inittab
awk ‘BEGIN {print ARGV[1]}’ /etc/fstab /etc/inittab

（#要点：自定义变量{区分字符大小写}
(1) -v var=value
(2) 在program中直接定义）

例：

awk -v test='hello gawk' '{print test}' /etc/fstab
awk -v test='hello gawk' 'BEGIN{print test}'
awk 'BEGIN{test="hello,gawk";print test}'
awk –F:‘{sex=“male”;print $1,sex,age;age=18}’ /etc/passwd
cat awkscript
{print script,$1,$2}
awk -F: -f awkscript script=“awk” /etc/passwd

5.printf命令

格式化并输出结果到标准输出。

1）格式化输出：

格式化输出：printf “FORMAT”, item1, item2, ...

必须指定FORMAT
不会自动换行，需要显式给出换行控制符，\n
FORMAT中需要分别为后面每个item指定格式符

2）格式符：

格式符：与item一一对应

%c: 显示字符的ASCII码
%d, %i: 显示十进制整数
%e, %E:显示科学计数法数值
%f：显示为浮点数
%g, %G：以科学计数法或浮点形式显示数值
%s：显示字符串
%u：无符号整数
%%: 显示%自身

3）修饰符：

#[.#]：第一个数字控制显示的宽度；第二个#表示小数点后精度，%3.1f
-: 左对齐（默认右对齐） %-15s
+：显示数值的正负符号 %+d

例：

awk -F: ‘{printf "%s",$1}’ /etc/passwd
awk -F: ‘{printf "%s\n",$1}’ /etc/passwd
awk -F: '{printf "%-20s %10d\n",$1,$3}' /etc/passwd
awk -F: ‘{printf "Username: %s\n",$1}’ /etc/passwd
awk -F: ‘{printf “Username: %s,UID:%d\n",$1,$3}’/etc/passwd
awk -F: ‘{printf "Username: %15s,UID:%d\n",$1,$3}’ /etc/passwd
awk -F: ‘{printf "Username: %-15s,UID:%d\n",$1,$3}’ /etc/passwd

例：

        1.用awk求出磁盘利用。

~]# df |grep /dev/sd |awk '{printf "DevName:%s Used:%s\n",$1,$5}'
DevName:/dev/sda2 Used:19%
DevName:/dev/sda3 Used:1%
DevName:/dev/sda1 Used:55%

2.将/etc/passwd第一列当作姓名，第三列当作工资，打印报表，要求显示：
Name:zhangsan Salary:3300 Level:High
工资大于3000的，Level显示High，大于1000，小于等于3000的显示Soso，小于1000的显示LOW。

~]# awk -F: '{if($3>3000){Level="High"}else if($3>1000 && $3<=3000）{Level="Soso"}else{Level="Low"};printf "Name:%-20s Salary:%-20d Level:%s\n",$1,$3,Level}' /etc/passwd
Name:root Salary:0 Level:Low
Name:bin Salary:1 Level:Low
Name:daemon Salary:2 Level:Low
Name:adm Salary:3 Level:Low
Name:lp Salary:4 Level:Low
......

3.利用echo {1..10}，打印如下结果：

~]# echo {1..10} |awk '{i=1;while(i<=NF){if($i%2==0){print $i,"is oushu"} else{print $i, "is jishu"};i++}}'
1 is jishu
2 is oushu
3 is jishu
4 is oushu
5 is jishu
6 is oushu
7 is jishu
8 is oushu
9 is jishu
10 is oushu

4.显示文件的行

~]# awk '{i=1;sum=0;while(i<=NF){sum+=$i;i++};print sum}' x.txt #显示每行各自的总行
55
155
~]# awk '{i=1;while(i<=NF){sum+=$i;i++};print sum}' x.txt #每行显示一次总和
55
210
~]# awk '{i=1;while(i<=NF){sum+=$i;i++}}END{print sum}' x.txt #只显示总和
210