一 awk简介
awk命名源自于它的三大作者名字的首字母，分别是Alfred Aho、Brian Kernighan、Peter Weinberger。（gawk是awk的GNU版本，它提供了Bell实验室和GNU的一些扩展）。
awk 是一种编程语言，用于在linux/unix下对文本和数据进行处理。数据可以来自标准输入、一个
或多个文件，或其它命令的输出。它支持用户自定义函数和动态正则表达式等先进功能，是linux/unix
下的一个强大编程工具。它在命令行中使用，但更多是作为脚本来使用。
awk的处理文本和数据的方式是这样的，它逐行扫描文件，从第一行到最后一行，寻找匹配的特定
模式的行，并在这些行上进行你想要的操作。如果没有指定处理动作，则把匹配的行显示到标准输出(
屏幕)，如果没有指定模式，则所有被操作所指定的行都被处理
awk的两种语法格式
awk [options] 'commands' filename
awk [options] -f awk-script-file filename
awk选项options
-F 定义字段分隔符，默认的分隔符是空格或制表符(tab)
awk的命令commands总共由三部分组成
BEGIN{} {} END{}
读所有行之前做的事情 读一行处理一行 所有读完之后要做的事情
可以省略BEGIN{} 和END{}，只进行{}行处理，并且{}行处理前可以加匹配，匹配成功后再处理
awk 'pattern' filename 示例：awk -F: '/root/' /etc/passwd
awk '{action}' filename 示例：awk -F: '{print $1}' /etc/passwd
awk 'pattern{action}' filename 示例：awk -F: '/root/{print $1,$3}' /etc/passwd
示例：awk 'BEGIN{FS=":"} /root/{print $1,$3}' /etc/passwd
其他命令 |awk 'pattern'
其他命令 |awk '{action}'
其他命令 |awk 'pattern{action}'
# 匹配pattern可以是：/正则表达式/也可以是条件，如下
示例：df -P |awk '$4 > 999999{print $0}' # 也可以省略{print $0}
模式pattern还可以是其他，详解第五章节
二 awk工作原理
例子：head -10 /etc/passwd |awk -F":" ‘BEGIN{count=0}{print $0;count++}END{print count}’
head -10 /etc/passwd |awk ‘BEGIN{count=0;FS=":"}{print $0;count++}END{print count}’
原理
1.先运行：行前处理代码
BEGIN{count=0;FS=":"}
2.再运行：行处理
（1）读一行到内存中，然后awk生成一系列内置变量
$0:一整行内容
$1:已指定的分隔符分隔开的第一段内容
$2:已指定的分隔符分隔开的第 二段内容
NR：行号
NF：段数
FS:输入分隔符，按照什么符号来切分每一行内容
OFS：输出分隔符，按照什么符号来连接输出的结果
（2）运行行处理的的代码 {print $0;count++}
（3）循环往复，直到所有的行都处理完毕
3.最后运行，行后处理
END{print count}
示例---- >以/etc/passwd为例-----awk -F":" ‘BEGIN{count=0}{print $0;count++}END{print count}’
[root@localhost ~]# head -10 /etc/passwd |awk -F":" 'BEGIN{cpunt=0}{print $0;count++}END{print count}'
root:x:0:0:root:/root:/bin/bash
bin:x:1:1:bin:/bin:/sbin/nologin
daemon:x:2:2:daemon:/sbin:/sbin/nologin
adm:x:3:4:adm:/var/adm:/sbin/nologin
lp:x:4:7:lp:/var/spool/lpd:/sbin/nologin
sync:x:5:0:sync:/sbin:/bin/sync
shutdown:x:6:0:shutdown:/sbin:/sbin/shutdown
halt:x:7:0:halt:/sbin:/sbin/halt
mail:x:8:12:mail:/var/spool/mail:/sbin/nologin
operator:x:11:0:operator:/root:/sbin/nologin
10
[root@localhost ~]# head -10 /etc/passwd |awk 'BEGIN{count=0;FS=":"}{print $0;count++}END{print count}'
root:x:0:0:root:/root:/bin/bash
bin:x:1:1:bin:/bin:/sbin/nologin
daemon:x:2:2:daemon:/sbin:/sbin/nologin
adm:x:3:4:adm:/var/adm:/sbin/nologin
lp:x:4:7:lp:/var/spool/lpd:/sbin/nologin
sync:x:5:0:sync:/sbin:/bin/sync
shutdown:x:6:0:shutdown:/sbin:/sbin/shutdown
halt:x:7:0:halt:/sbin:/sbin/halt
mail:x:8:12:mail:/var/spool/mail:/sbin/nologin
operator:x:11:0:operator:/root:/sbin/nologin
10
[root@localhost ~]# head -10 /etc/passwd |awk 'BEGIN{count=0;FS=":"}{print $1,$3;count++}END{print count}'
root 0
bin 1
daemon 2
adm 3
lp 4
sync 5
shutdown 6
halt 7
mail 8
operator 11
10
[root@localhost ~]# head -10 /etc/passwd |awk 'BEGIN{count=0;FS=":";OFS="_"}{print $1,$3;count++}END{print count}'
root_0
bin_1
daemon_2
adm_3
lp_4
sync_5
shutdown_6
halt_7
mail_8
operator_11
10
示例---- .>$1,$NF,$2,$NR,NR,NF.(NF-1)的用法
[root@localhost ~]# head -10 /etc/passwd |awk -F: '{print NR,$1}'
1 root
2 bin
3 daemon
4 adm
5 lp
6 sync
7 shutdown
8 halt
9 mail
10 operator
[root@localhost ~]# head -10 /etc/passwd |awk -F: '{print NF,$1}'
7 root
7 bin
7 daemon
7 adm
7 lp
7 sync
7 shutdown
7 halt
7 mail
7 operator
[root@localhost ~]# head -10 /etc/passwd |awk -F: '{print $1,$NF}'
root /bin/bash
bin /sbin/nologin
daemon /sbin/nologin
adm /sbin/nologin
lp /sbin/nologin
sync /bin/sync
shutdown /sbin/shutdown
halt /sbin/halt
mail /sbin/nologin
operator /sbin/nologin
[root@localhost ~]# head -10 /etc/passwd |awk -F: '{print $1,$(NF-1)}'
root /root
bin /bin
daemon /sbin
adm /var/adm
lp /var/spool/lpd
sync /sbin
shutdown /sbin
halt /sbin
mail /var/spool/mail
operator /root
可以提前把{}处理的规则定在一个文件里--------awk -F: -f 1.awk a.txt
[root@localhost ~]# cat 1.awk
{print $2,$NF}
[root@localhost ~]# cat a.txt
root:x:0:0:root:/root:/bin/bash
bin:x:1:1:bin:/bin:/sbin/nologin
daemon:x:2:2:daemon:/sbin:/sbin/nologin
[root@localhost ~]# awk -F: -f 1.awk a.txt
x /bin/bash
x /sbin/nologin
x /sbin/nologin
三、 模式pattern与动作action
行定位
[root@localhost ~]# awk -F: '{print $0}' a.txt
root:x:0:0:root:/root:/bin/bash
bin:x:1:1:bin:/bin:/sbin/nologin
rootdaemon:x:2:2:daemon:/sbin:/sbin/nologin
adm:x:3:4:adm:/var/adm:/sbin/nologin
lp:x:4:7:lp:/var/spool/lpd:/sbin/nologin
sonc:x:5:0:sync:/sbin:/bin/synci
shutdown:x:6:0:shutdown:/sbin:/sbin/shutdown
hrootalt:x:7:0:halt:/sbin:/sbin/halt
mail:x:8:12:mail:/var/spool/mail:/sbin/nologin
operator:x:11:0:operator:/root:/sbin/nologin
[root@localhost ~]# awk -F: '{print NR,$1}' a.txt
1 root
2 bin
3 daemon
4 adm
5 lp
6 sync
7 shutdown
8 halt
9 mail
10 operator
11
[root@localhost ~]# awk -F: '{print NF,$1}' a.txt
7 root
7 bin
7 daemon
7 adm
7 lp
7 sync
7 shutdown
7 halt
7 mail
7 operator
0
[root@localhost ~]# awk -F: 'NR == 3 {print $1}' a.txt
daemon
[root@localhost ~]# awk -F: 'NR == 3 || NR == 1 {print $1}' a.txt
root
daemon
[root@localhost ~]# awk -F: 'NR >= 3 && NR <= 7 {print $1}' a.txt
daemon
adm
lp
sync
shutdown
正则定位
[root@localhost ~]# awk -F: '{print $0}' a.txt
root:x:0:0:root:/root:/bin/bash
bin:x:1:1:bin:/bin:/sbin/nologin
daemon:x:2:2:daemon:/sbin:/sbin/nologin
adm:x:3:4:adm:/var/adm:/sbin/nologin
lp:x:4:7:lp:/var/spool/lpd:/sbin/nologin
sync:x:5:0:sync:/sbin:/bin/sync
shutdown:x:6:0:shutdown:/sbin:/sbin/shutdown
halt:x:7:0:halt:/sbin:/sbin/halt
mail:x:8:12:mail:/var/spool/mail:/sbin/nologin
operator:x:11:0:operator:/root:/sbin/nologin
[root@localhost ~]# awk -F: '/root/{print $0}' a.txt
root:x:0:0:root:/root:/bin/bash
operator:x:11:0:operator:/root:/sbin/nologin
[root@localhost ~]# awk -F: '/^root/{print $0}' a.txt
root:x:0:0:root:/root:/bin/bash
[root@localhost ~]# vim a.txt
[root@localhost ~]# awk -F: '{print $0}' a.txt
root:x:0:0:root:/root:/bin/bash
bin:x:1:1:bin:/bin:/sbin/nologin
rootdaemon:x:2:2:daemon:/sbin:/sbin/nologin
adm:x:3:4:adm:/var/adm:/sbin/nologin
lp:x:4:7:lp:/var/spool/lpd:/sbin/nologin
sonc:x:5:0:sync:/sbin:/bin/synci
shutdown:x:6:0:shutdown:/sbin:/sbin/shutdown
hrootalt:x:7:0:halt:/sbin:/sbin/halt
mail:x:8:12:mail:/var/spool/mail:/sbin/nologin
operator:x:11:0:operator:/root:/sbin/nologin
[root@localhost ~]# awk -F: '/^root/{print $0}' a.txt
root:x:0:0:root:/root:/bin/bash
rootdaemon:x:2:2:daemon:/sbin:/sbin/nologin
[root@localhost ~]# awk -F: '$1 ~ /root/{print $0}' a.txt
root:x:0:0:root:/root:/bin/bash
rootdaemon:x:2:2:daemon:/sbin:/sbin/nologin
hrootalt:x:7:0:halt:/sbin:/sbin/halt
[root@localhost ~]# awk -F: '$1 ~ /^root/{print $0}' a.txt
root:x:0:0:root:/root:/bin/bash
rootdaemon:x:2:2:daemon:/sbin:/sbin/nologin
[root@localhost ~]# awk -F: '!($1 ~ /^root/){print $0}' a.txt
bin:x:1:1:bin:/bin:/sbin/nologin
adm:x:3:4:adm:/var/adm:/sbin/nologin
lp:x:4:7:lp:/var/spool/lpd:/sbin/nologin
sonc:x:5:0:sync:/sbin:/bin/synci
shutdown:x:6:0:shutdown:/sbin:/sbin/shutdown
hrootalt:x:7:0:halt:/sbin:/sbin/halt
mail:x:8:12:mail:/var/spool/mail:/sbin/nologin
operator:x:11:0:operator:/root:/sbin/nologin
[root@localhost ~]# awk -F: '!(NR>=3){print $0}' a.txt
root:x:0:0:root:/root:/bin/bash
bin:x:1:1:bin:/bin:/sbin/nologin
范围模式
正则
awk ‘/root/,/egon/’ filename
说明：
awk将显示从root首次出现的行到egon首次出现的行这个范围内的所有行，包括两个边界在内。如果没有找到egon，awk将继续打印各行直至文件末尾。
如果打印完root到egon的内容之后，又出现了root， awk就又一次开始显示行，直至找到下一个egon或文件末尾。
示例
[root@localhost ~]# awk '{print $0}' b.txt
i111111root333
23424553225
334445454545
43525266egon
34444444444444444
66666666666
777777777777
9999999999
8888888888root4444444444
-----------------------112
---------------------34
----------------egon
[root@localhost ~]# awk '/root/,/egon/{print $0}' b.txt
i111111root333
23424553225
334445454545
43525266egon
8888888888root4444444444
-----------------------112
---------------------34
----------------egon
[root@localhost ~]# vim b.txt
[root@localhost ~]# awk '{print $0}' b.txt
i111111root333
23424553225
334445454545
43525266egon
34444444444444444
66666666666
777777777777
9999999999
8888888888root4444444444
-----------------------112
---------------------34
----------------4444444444
[root@localhost ~]# awk '/root/,/egon/{print $0}' b.txt
i111111root333
23424553225
334445454545
43525266egon
8888888888root4444444444
-----------------------112
---------------------34
----------------4444444444
[root@localhost ~]# awk '{print $0}' b.txt
i111111egon333
2342455322egon5
334445454545egon
43525266egon
34444444444444444
66666666666egon
777777777777
9999999999
8888888888root4444444444
-----------------------112
---------------------34
----------------4444444444
[root@localhost ~]# awk 'NR >=3 && NR <= 7 && /egon/{print NR,$0}' b.txt
3 334445454545egon
4 43525266egon
6 66666666666egon
比较表达式
比较表达式指的是使用关系运算符来比较数字以及字符串，只有当条件为真，才执行指定的动作
关系运算符
运算符 含义 示例
< 小于 x<y
<= 小于或等于 x<=y
== 等于 x==y
!= 不等于 x!=y
>= 大于等于 x>=y
> 大于 x>y
~ 正则表达式匹配 x~/y/
!~ 正则表达式不匹配 x!~/y/
示例：
# awk -F: '$3 == 0' /etc/passwd
# awk -F: '$3 < 10' /etc/passwd
# awk -F: '$7 == "/bin/bash"' /etc/passwd
# awk -F: '$1 == "root" ' /etc/passwd
示例---- ~ 或者!~正则表达式匹配
[root@localhost ~]# awk -F: '{print $0}' a.txt
root:x:0:0:root:/root:/bin/bash
bin:x:1:1:bin:/bin:/sbin/nologin
rootdaemon:x:2:2:daemon:/sbin:/sbin/nologin
adm:x:3:4:adm:/var/adm:/sbin/nologin
lp:x:4:7:lp:/var/spool/lpd:/sbin/nologin
sonc:x:5:0:sync:/sbin:/bin/synci
shutdown:x:6:0:shutdown:/sbin:/sbin/shutdown
hrootalt:x:7:0:halt:/sbin:/sbin/halt
mail:x:8:12:mail:/var/spool/mail:/sbin/nologin
operator:x:11:0:operator:/root:/sbin/nologin
[root@localhost ~]# awk -F: '$1 ~/root/{print $0}' a.txt
root:x:0:0:root:/root:/bin/bash
rootdaemon:x:2:2:daemon:/sbin:/sbin/nologin
hrootalt:x:7:0:halt:/sbin:/sbin/halt
[root@localhost ~]# awk -F: '$1 !~/root/{print $0}' a.txt
bin:x:1:1:bin:/bin:/sbin/nologin
adm:x:3:4:adm:/var/adm:/sbin/nologin
lp:x:4:7:lp:/var/spool/lpd:/sbin/nologin
sonc:x:5:0:sync:/sbin:/bin/synci
shutdown:x:6:0:shutdown:/sbin:/sbin/shutdown
mail:x:8:12:mail:/var/spool/mail:/sbin/nologin
operator:x:11:0:operator:/root:/sbin/nologin
示例---- ~==或者>=或者<=正则表达式匹配
[root@localhost ~]# awk -F: '{print $0}' a.txt
root:x:0:0:root:/root:/bin/bash
bin:x:1:1:bin:/bin:/sbin/nologin
rootdaemon:x:2:2:daemon:/sbin:/sbin/nologin
adm:x:3:4:adm:/var/adm:/sbin/nologin
lp:x:4:7:lp:/var/spool/lpd:/sbin/nologin
sonc:x:5:0:sync:/sbin:/bin/synci
shutdown:x:6:0:shutdown:/sbin:/sbin/shutdown
hrootalt:x:7:0:halt:/sbin:/sbin/halt
mail:x:8:12:mail:/var/spool/mail:/sbin/nologin
operator:x:11:0:operator:/root:/sbin/nologin
[root@localhost ~]# awk -F: 'NR == 3 {print $1}' a.txt
daemon
[root@localhost ~]# awk -F: 'NR == 3 || NR == 1 {print $1}' a.txt
root
daemon
[root@localhost ~]# awk -F: 'NR >= 3 && NR <= 7 {print $1}' a.txt
daemon
adm
lp
sync
shutdown
[root@localhost ~]# awk -F: '!($1 ~ /^root/){print $0}' a.txt
bin:x:1:1:bin:/bin:/sbin/nologin
adm:x:3:4:adm:/var/adm:/sbin/nologin
lp:x:4:7:lp:/var/spool/lpd:/sbin/nologin
sonc:x:5:0:sync:/sbin:/bin/synci
shutdown:x:6:0:shutdown:/sbin:/sbin/shutdown
hrootalt:x:7:0:halt:/sbin:/sbin/halt
mail:x:8:12:mail:/var/spool/mail:/sbin/nologin
operator:x:11:0:operator:/root:/sbin/nologin
[root@localhost ~]# awk -F: '!(NR>=3){print $0}' a.txt
root:x:0:0:root:/root:/bin/bash
bin:x:1:1:bin:/bin:/sbin/nologin
[root@localhost ~]# awk -F: '$1 == "root"{print $0}' a.txt
root:x:0:0:root:/root:/bin/bash
[root@localhost ~]# awk -F: '$1 != "root"{print $0}' a.txt
bin:x:1:1:bin:/bin:/sbin/nologin
rootdaemon:x:2:2:daemon:/sbin:/sbin/nologin
adm:x:3:4:adm:/var/adm:/sbin/nologin
lp:x:4:7:lp:/var/spool/lpd:/sbin/nologin
sonc:x:5:0:sync:/sbin:/bin/synci
shutdown:x:6:0:shutdown:/sbin:/sbin/shutdown
hrootalt:x:7:0:halt:/sbin:/sbin/halt
mail:x:8:12:mail:/var/spool/mail:/sbin/nologin
operator:x:11:0:operator:/root:/sbin/nologin
逻辑运算和复合模式
&& 逻辑与 a&&b
|| 逻辑或 a||b
! 逻辑非 !a
示例：
# awk '$2 > 5 && $2 <= 15' filename
# awk '$3 == 100 || $4 > 50' filename
# awk '!($2 < 100 && $3 < 20)' filename
示例
[root@localhost ~]# awk -F: '{print $0}' a.txt
root:x:0:0:root:/root:/bin/bash
bin:x:1:1:bin:/bin:/sbin/nologin
rootdaemon:x:2:2:daemon:/sbin:/sbin/nologin
adm:x:3:4:adm:/var/adm:/sbin/nologin
lp:x:4:7:lp:/var/spool/lpd:/sbin/nologin
sonc:x:5:0:sync:/sbin:/bin/synci
shutdown:x:6:0:shutdown:/sbin:/sbin/shutdown
hrootalt:x:7:0:halt:/sbin:/sbin/halt
mail:x:8:12:mail:/var/spool/mail:/sbin/nologin
operator:x:11:0:operator:/root:/sbin/nologin
[root@localhost ~]# awk -F: 'NR == 3 {print $1}' a.txt
daemon
[root@localhost ~]# awk -F: 'NR == 3 || NR == 1 {print $1}' a.txt
root
daemon
[root@localhost ~]# awk -F: 'NR >= 3 && NR <= 7 {print $1}' a.txt
daemon
adm
lp
sync
shutdown
算数运算
+ - * / %(模) ^(幂2^3)
可以在模式中执行计算，awk都将按浮点数方式执行算术运算
示例
[root@localhost ~]# awk -F: '{print $0}' a.txt
root:x:0:0:root:/root:/bin/bash
bin:x:1:1:bin:/bin:/sbin/nologin
rootdaemon:x:2:2:daemon:/sbin:/sbin/nologin
adm:x:3:4:adm:/var/adm:/sbin/nologin
lp:x:4:7:lp:/var/spool/lpd:/sbin/nologin
sonc:x:5:0:sync:/sbin:/bin/synci
shutdown:x:6:0:shutdown:/sbin:/sbin/shutdown
hrootalt:x:7:0:halt:/sbin:/sbin/halt
mail:x:8:12:mail:/var/spool/mail:/sbin/nologin
operator:x:11:0:operator:/root:/sbin/nologin
[root@localhost ~]# awk -F: 'NR % 2 == 0 {print NR,$0}' a.txt
2 bin:x:1:1:bin:/bin:/sbin/nologin
4 adm:x:3:4:adm:/var/adm:/sbin/nologin
6 sonc:x:5:0:sync:/sbin:/bin/synci
8 hrootalt:x:7:0:halt:/sbin:/sbin/halt
10 operator:x:11:0:operator:/root:/sbin/nologin
[root@localhost ~]# awk -F: 'NR % 2 == 1 {print NR,$0}' a.txt
1 root:x:0:0:root:/root:/bin/bash
3 rootdaemon:x:2:2:daemon:/sbin:/sbin/nologin
5 lp:x:4:7:lp:/var/spool/lpd:/sbin/nologin
7 shutdown:x:6:0:shutdown:/sbin:/sbin/shutdown
9 mail:x:8:12:mail:/var/spool/mail:/sbin/nologin
11
[root@localhost ~]# awk -F: 'NR % 2 != 0 {print NR,$0}' a.txt
1 root:x:0:0:root:/root:/bin/bash
3 rootdaemon:x:2:2:daemon:/sbin:/sbin/nologin
5 lp:x:4:7:lp:/var/spool/lpd:/sbin/nologin
7 shutdown:x:6:0:shutdown:/sbin:/sbin/shutdown
9 mail:x:8:12:mail:/var/spool/mail:/sbin/nologin
11
[root@localhost ~]# awk -F: '{print $0}' c.txt
egon:12000:18
tom:10000:18
jock:8000:18
[root@localhost ~]# awk -F: '$2 *12 > 100000 {print $1}' c.txt
egon
tom
四 格式化输出
================print函数===================
[root@egon ~]# date | awk '{print "月:",$2,"\n年:",$1}'
月: 09月
年: 2020年
[root@egon ~]#
[root@egon ~]# awk -F: '{print "用户名:",$1,"用户id:",$3}' /etc/passwd
================printf函数===================
[root@egon ~]# awk -F: '{printf "用户名:%s 用户id:%s\n",$1,$3}' /etc/passwd
[root@egon ~]# awk -F: '{printf "|%-15s| %-10s| %-15s|\n", $1,$2,$3}' /etc/passwd
%s 字符类型
%d 数值类型
占15格的字符串
- 表示左对齐，默认是右对齐
printf默认不会在行尾自动换行，加\n
示例------ awk -F: ‘BEGIN{OFS="—"}{print "行号:"NR,“用户名:”$1}’ a.txt
[root@localhost ~]# awk -F: '{print NR,$1}' a.txt
1 root
2 bin
3 rootdaemon
4 adm
5 lp
6 sonc
7 shutdown
8 hrootalt
9 mail
10 operator
11
[root@localhost ~]# awk -F: 'BEGIN{OFS="---"}{print NR,$1}' a.txt
1---root
2---bin
3---rootdaemon
4---adm
5---lp
6---sonc
7---shutdown
8---hrootalt
9---mail
10---operator
11---
[root@localhost ~]# awk -F: 'BEGIN{OFS="---"}{print NR,"行号，"$1",用户名"}' a.txt
1---行号，root,用户名
2---行号，bin,用户名
3---行号，rootdaemon,用户名
4---行号，adm,用户名
5---行号，lp,用户名
6---行号，sonc,用户名
7---行号，shutdown,用户名
8---行号，hrootalt,用户名
9---行号，mail,用户名
10---行号，operator,用户名
11---行号，,用户名
[root@localhost ~]# awk -F: 'BEGIN{OFS="---"}{print "行号",NR,"用户名",$1}' a.txt
行号---1---用户名---root
行号---2---用户名---bin
行号---3---用户名---rootdaemon
行号---4---用户名---adm
行号---5---用户名---lp
行号---6---用户名---sonc
行号---7---用户名---shutdown
行号---8---用户名---hrootalt
行号---9---用户名---mail
行号---10---用户名---operator
行号---11---用户名---
[root@localhost ~]# awk -F: 'BEGIN{OFS="---"}{print "行号:"NR,"用户名:"$1}' a.txt
行号:1---用户名:root
行号:2---用户名:bin
行号:3---用户名:rootdaemon
行号:4---用户名:adm
行号:5---用户名:lp
行号:6---用户名:sonc
行号:7---用户名:shutdown
行号:8---用户名:hrootalt
行号:9---用户名:mail
行号:10---用户名:operator
行号:11---用户名:
[root@localhost ~]# awk -F: 'BEGIN{OFS="---"}{printf "行号:%s----用户名:%s\n",NR,$1}' a.txt
行号:1----用户名:root
行号:2----用户名:bin
行号:3----用户名:rootdaemon
行号:4----用户名:adm
行号:5----用户名:lp
行号:6----用户名:sonc
行号:7----用户名:shutdown
行号:8----用户名:hrootalt
行号:9----用户名:mail
行号:10----用户名:operator
行号:11----用户名:
[root@localhost ~]# awk -F: '{printf "行号:%s----用户名:%s\n",NR,$1}' a.txt
行号:1----用户名:root
行号:2----用户名:bin
行号:3----用户名:rootdaemon
行号:4----用户名:adm
行号:5----用户名:lp
行号:6----用户名:sonc
行号:7----用户名:shutdown
行号:8----用户名:hrootalt
行号:9----用户名:mail
行号:10----用户名:operator
行号:11----用户名:
五、awk流程控制之if判断
＝＝条件判断
if语句：
格式
{if(表达式)｛语句;语句；...｝}
awk -F: '{if($3==0) print $1 " is administrator."}' /etc/passwd
awk -F: '{if($3>0 && $3<500){count++; print $1}} END{print count}' /etc/passwd //统计系统用户数
if...else语句:
格式
{if(表达式)｛语句;语句;...｝else｛语句;语句;...}}
awk -F: '{if($3==0){print $1} else {print $7}}' /etc/passwd
awk -F: '{if($3>0) {count++} else{i++}' /etc/passwd
awk -F: '{if($3>0){count++} else{i++}} END{print "管理员个数: "i "\n系统用户数: "count}' /etc/passwd
if...else if...else语句：
格式
{if(表达式)｛语句;语句；...｝else if(表达式)｛语句;语句；...｝else if(表达式)｛语句;语句；...｝else｛语句;语句；...｝}
awk -F: '{if($3==0){i++} else if($3>499){k++} else{j++}} END{print i; print k; print j}' /etc/passwd
awk -F: '{if($3==0){i++} else if($3>499){k++} else{j++}} END{print "管理员个数: "i; print "普通用个数: "k; print "系统用户: "j}' /etc/passwd
示例------awk流程控制
[root@localhost ~]# awk -F: 'BEGIN{x=0;y=0;z=0}{if ($3 == 0){x++} else if ($3>=1 && $3<=999){y++} else {z++}}END{printf "管理员用户:%s 系统用户:%s 普通用户:%s\n",x,y,z}' /etc/passwd
管理员用户:1 系统用户:26 普通用户:3
示例-----shell脚本
[root@localhost ~]# vim test.sh
#!/bin/bash
x=0
y=0
z=0
for uid in $(awk -F: '{print $3}' /etc/passwd)
do
if [ $uid -eq 0 ];then
let x++
elif [ $uid -ge 1 -a $uid -le 999 ];then
let y++
else
let z++
fi
done
printf "管理员用户:%s 系统用户:%s 普通用户:%s\n" $x $y $z
#echo "管理员用户:$x"
#echo "系统用户:$y"
#echo "普通用户:$z"
5.1循环
while:
awk ‘{n=1;while (n<=3){print $0;n++}}’ a.txt
for:
awk ‘{for (n=1;n<=3;n++){print $0}}’ a.txt
示例
awk '{n=1;while (n<=3){print $0;n++}}' a.txt
root:x:0:0:root:/root:/bin/bash
root:x:0:0:root:/root:/bin/bash
root:x:0:0:root:/root:/bin/bash
bin:x:1:1:bin:/bin:/sbin/nologin
bin:x:1:1:bin:/bin:/sbin/nologin
bin:x:1:1:bin:/bin:/sbin/nologin
rootdaemon:x:2:2:daemon:/sbin:/sbin/nologin
rootdaemon:x:2:2:daemon:/sbin:/sbin/nologin
rootdaemon:x:2:2:daemon:/sbin:/sbin/nologin
adm:x:3:4:adm:/var/adm:/sbin/nologin
adm:x:3:4:adm:/var/adm:/sbin/nologin
adm:x:3:4:adm:/var/adm:/sbin/nologin
lp:x:4:7:lp:/var/spool/lpd:/sbin/nologin
lp:x:4:7:lp:/var/spool/lpd:/sbin/nologin
lp:x:4:7:lp:/var/spool/lpd:/sbin/nologin
sonc:x:5:0:sync:/sbin:/bin/synci
sonc:x:5:0:sync:/sbin:/bin/synci
sonc:x:5:0:sync:/sbin:/bin/synci
shutdown:x:6:0:shutdown:/sbin:/sbin/shutdown
shutdown:x:6:0:shutdown:/sbin:/sbin/shutdown
shutdown:x:6:0:shutdown:/sbin:/sbin/shutdown
hrootalt:x:7:0:halt:/sbin:/sbin/halt
hrootalt:x:7:0:halt:/sbin:/sbin/halt
hrootalt:x:7:0:halt:/sbin:/sbin/halt
mail:x:8:12:mail:/var/spool/mail:/sbin/nologin
mail:x:8:12:mail:/var/spool/mail:/sbin/nologin
mail:x:8:12:mail:/var/spool/mail:/sbin/nologin
operator:x:11:0:operator:/root:/sbin/nologin
operator:x:11:0:operator:/root:/sbin/nologin
operator:x:11:0:operator:/root:/sbin/nologin
[root@localhost ~]# awk '{for (n=1;n<=3;n++){print $0}}' a.txt
root:x:0:0:root:/root:/bin/bash
root:x:0:0:root:/root:/bin/bash
root:x:0:0:root:/root:/bin/bash
bin:x:1:1:bin:/bin:/sbin/nologin
bin:x:1:1:bin:/bin:/sbin/nologin
bin:x:1:1:bin:/bin:/sbin/nologin
rootdaemon:x:2:2:daemon:/sbin:/sbin/nologin
rootdaemon:x:2:2:daemon:/sbin:/sbin/nologin
rootdaemon:x:2:2:daemon:/sbin:/sbin/nologin
adm:x:3:4:adm:/var/adm:/sbin/nologin
adm:x:3:4:adm:/var/adm:/sbin/nologin
adm:x:3:4:adm:/var/adm:/sbin/nologin
lp:x:4:7:lp:/var/spool/lpd:/sbin/nologin
lp:x:4:7:lp:/var/spool/lpd:/sbin/nologin
lp:x:4:7:lp:/var/spool/lpd:/sbin/nologin
sonc:x:5:0:sync:/sbin:/bin/synci
sonc:x:5:0:sync:/sbin:/bin/synci
sonc:x:5:0:sync:/sbin:/bin/synci
shutdown:x:6:0:shutdown:/sbin:/sbin/shutdown
shutdown:x:6:0:shutdown:/sbin:/sbin/shutdown
shutdown:x:6:0:shutdown:/sbin:/sbin/shutdown
hrootalt:x:7:0:halt:/sbin:/sbin/halt
hrootalt:x:7:0:halt:/sbin:/sbin/halt
hrootalt:x:7:0:halt:/sbin:/sbin/halt
mail:x:8:12:mail:/var/spool/mail:/sbin/nologin
mail:x:8:12:mail:/var/spool/mail:/sbin/nologin
mail:x:8:12:mail:/var/spool/mail:/sbin/nologin
operator:x:11:0:operator:/root:/sbin/nologin
operator:x:11:0:operator:/root:/sbin/nologin
operator:x:11:0:operator:/root:/sbin/nologin
5.2数组
示例
[root@localhost ~]# cat a.txt
root:x:0:0:root:/root:/bin/bash
bin:x:1:1:bin:/bin:/sbin/nologin
rootdaemon:x:2:2:daemon:/sbin:/sbin/nologin
adm:x:3:4:adm:/var/adm:/sbin/nologin
lp:x:4:7:lp:/var/spool/lpd:/sbin/nologin
sonc:x:5:0:sync:/sbin:/bin/synci
shutdown:x:6:0:shutdown:/sbin:/sbin/shutdown
hrootalt:x:7:0:halt:/sbin:/sbin/halt
mail:x:8:12:mail:/var/spool/mail:/sbin/nologin
operator:x:11:0:operator:/root:/sbin/nologin
[root@localhost ~]# awk -F: 'BEGIN{i=0}{username[i]=$1;i++}END{for (x=0;x<i;x++){print username[x]}}' a.txt
root
bin
rootdaemon
adm
lp
sonc
shutdown
hrootalt
mail
operator
[root@localhost ~]# awk -F: 'BEGIN{i=0}{username[i]=$1;i++}END{for (x in username){print username[x]}}' a.txt
lp
sonc
shutdown
hrootalt
mail
operator
root
bin
rootdaemon
adm
[root@localhost ~]# awk -F: '{username[$1]=$3;i++}END{for (k in username){print k}}' a.txt
hrootalt
shutdown
bin
mail
adm
operator
rootdaemon
root
sonc
lp
[root@localhost ~]# awk -F: '{username[$1]=$3;i++}END{for (k in username){print k,username[k]}}' a.txt
hrootalt 7
shutdown 6
bin 1
mail 8
adm 3
operator 11
rootdaemon 2
root 0
sonc 5
lp 4
统计用户名为4个字符的用户：
[root@localhost ~]# awk -F: '$1 ~/^....$/{print $0}' /etc/passwd
root:x:0:0:root:/root:/bin/bash
sync:x:5:0:sync:/sbin:/bin/sync
halt:x:7:0:halt:/sbin:/sbin/halt
mail:x:8:12:mail:/var/spool/mail:/sbin/nologin
dbus:x:81:81:System message bus:/:/sbin/nologin
sshd:x:74:74:Privilege-separated SSH:/var/empty/sshd:/sbin/nologin
abrt:x:173:173::/etc/abrt:/sbin/nologin
yuan:x:1000:1000::/home/yuan:/bin/bash
egon:x:1001:1001::/home/egon:/bin/bash
六 awk流程控制
＝＝条件判断
if语句：
格式
{if(表达式)｛语句;语句；...｝}
awk -F: '{if($3==0) print $1 " is administrator."}' /etc/passwd
awk -F: '{if($3>0 && $3<500){count++; print $1}} END{print count}' /etc/passwd //统计系统用户数
if...else语句:
格式
{if(表达式)｛语句;语句;...｝else｛语句;语句;...}}
awk -F: '{if($3==0){print $1} else {print $7}}' /etc/passwd
awk -F: '{if($3>0) {count++} else{i++}' /etc/passwd
awk -F: '{if($3>0){count++} else{i++}} END{print "管理员个数: "i "\n系统用户数: "count}' /etc/passwd
if...else if...else语句：
格式
{if(表达式)｛语句;语句；...｝else if(表达式)｛语句;语句；...｝else if(表达式)｛语句;语句；...｝else｛语句;语句；...｝}
awk -F: '{if($3==0){i++} else if($3>499){k++} else{j++}} END{print i; print k; print j}' /etc/passwd
awk -F: '{if($3==0){i++} else if($3>499){k++} else{j++}} END{print "管理员个数: "i; print "普通用个数: "k; print "系统用户: "j}' /etc/passwd
＝＝循环
while:
awk -F: '{i=1; while(i<=10) {print $0; i++}}' /etc/passwd //将每行打印10次
for:
awk -F: '{for(i=1;i<=10;i++) print $0}' /etc/passwd //将每行打印10次
＝＝数组(索引或key对应值)
# awk -F: '{username[++i]=$1} END{print username[1]}' /etc/passwd
root
# awk -F: '{username[i++]=$1} END{print username[1]}' /etc/passwd
bin
# awk -F: '{username[i++]=$1} END{print username[0]}' /etc/passwd
root
# awk -F: '{username[x++]=$1} END{for(i=0;i<NR;i++) print i,username[i]}' /etc/passwd
0 root
1 bin
2 daemon
3 adm
4 lp
5 sync
6 shutdown
7 halt
...
# awk -F: 'BEGIN{x=1} {user[x++]=$1} END{for(i=1;i<=NR;i++) {print i,user[i]} }' /etc/passwd
# awk -F: 'BEGIN{j=1} {if($3<5){user[j++]=$1}} END{for(i=1;i<j;i++) {print i,user[i]} }' /etc/passwd
# awk -F: 'BEGIN{i=1} {username[i]=$1;i++}'
# awk -F: 'BEGIN{i=1} $3<10{username[i]=$1;++i} END{for(j=1;j<i;j++){print j,username[j]}}' /etc/passwd
1 root
2 bin
3 daemon
4 adm
5 lp
6 sync
7 shutdown
8 halt
9 mail
10 admin
========================================================
# awk -F: '{username[++x]=$1} END{for(i=1;i<=NR;i++) {print i,username[i]}}' passwd1
1 root
2 bin
3 daemon
4 adm
5 lp
6 sync
7 shutdown
8 halt
9 mail
10 uucp
# awk -F: '{username[++x]=$1} END{for(i in username) {print username[i]} }' passwd1
adm
lp
sync
shutdown
halt
mail
uucp
root
bin
daemon
》》》》》》》》》》》》key：value《《《《《《《《《《《《
# awk -F: '{user_id[$1]=$3} END{for(i in user_id) {print i,user_id[i]}}' passwd1
bin 1
uucp 10
mail 8
sync 5
shutdown 6
adm 3
daemon 2
halt 7
root 0
lp 4
========================================================
统计用户名为4个字符的用户：
[root@aliyun ~]# awk -F: '$1~/^....$/{count++; print $1} END{print "count is: " count}' /etc/passwd
root
sync
halt
mail
news
uucp
nscd
vcsa
pcap
sshd
dbus
jack
count is: 12
[root@aliyun ~]# awk -F: 'length($1)==4{count++; print $1} END{print "count is: "count}' /etc/passwd
root
sync
halt
mail
news
uucp
nscd
vcsa
pcap
sshd
dbus
jack
count is: 12
作业
1. 取得网卡IP（除ipv6以外的所有IP）
2. 获得内存使用情况
3. 获得磁盘使用情况
4. 清空本机的ARP缓存
5. 打印出/etc/hosts文件的最后一个字段（按空格分隔）
6. 打印指定目录下的目录名
[root@aliyun dir1]# arp -a |awk -F"[()]" '{print "arp -d", $2}'
arp -d 192.168.2.26
arp -d 192.168.2.44
arp -d 192.168.2.28
arp -d 192.168.2.130
arp -d 192.168.2.90
arp -d 192.168.2.18
arp -d 192.168.2.129
[root@aliyun dir1]# arp -a |awk -F"[()]" '{print "arp -d " $2}' |sh
[root@aliyun ~]# awk -F: '{print $7}' /etc/passwd
[root@aliyun ~]# awk -F: '{print $NF}' /etc/passwd
[root@aliyun ~]# awk -F: '{print $(NF-1)}' /etc/passwd
[root@aliyun ~]# ll |grep '^d'
drwxr-xr-x 104 root root 12288 09-22 05:37 192.168.0.48
drwxr-xr-x 2 root root 4096 10-30 15:47 apache_log
drwxr-xr-x 2 root root 4096 10-30 15:23 awk
drwxr-xr-x 2 root root 4096 10-24 09:09 Desktop
drwxr-xr-x 12 root root 4096 10-08 06:12 LEMP_Soft
drwxr-xr-x 2 root root 4096 10-24 07:38 scripts
drwxr-xr-x 6 root root 4096 2012-03-29 uplayer
drwxr-xr-x 7 root root 4096 10-23 04:53 vmware
[root@aliyun ~]#
[root@aliyun ~]# ll |grep '^d' |awk '{print $NF}'
192.168.0.48
apache_log
awk
Desktop
LEMP_Soft
scripts
uplayer
vmware
awk脚本：
user1.awk
BEGIN {
FS=":"
}
{
if($3==0){
print $1
}
else{
print $7
}
}
user2.awk
BEGIN{
FS=":"
OFS="\t\t"
print "username\tuid"
print "-------------------"
}
{if($3==0){
print $1,$3;i++
}
}
END{
print "-------------------"
print "total users is: "i
}
七 练习题
已知一个变量 msg="I am a teacher, my name is egon"，打印字符长度小于3的单词
# 方式一：
[root@egon /]# for i in $msg;do [ ${#i} -lt 3 ] && echo $i;done
I
am
a
my
is
# 方式二：
[root@egon /]# echo $msg |xargs -n1 |awk '{if(length<3) print}'
I
am
a
my
is
# 方式三：
[root@egon /]# echo $msg |awk '{for(i=1;i<=NF;i++) if(length($i)<3) print $i}'
I
am
a
my
is
# 方式四：
[root@egon /]# echo $msg |egrep -wo '[a-z]{1,3}'
am
a
my
is
版权声明：本文为weixin_46837396原创文章，遵循CC 4.0 BY-SA版权协议，转载请附上原文出处链接和本声明。