shell工具-awk

awk

一个强大的文本分析工具，把文件逐行的读入，以空格为默认分隔符将每行切片，切开的部分再进行分析处理。

基本用法

awk [选项参数] 'pattern1{action} pattern2{action}...' filename
pattern:表示AWK在数据中查找的内容，就是匹配模式
action：在找到匹配内容时执行的一系列命令

选项参数说明

选项参数	功能描述
-F	指定输入文件拆分割符
-v	赋值一个用户定义变量

案例实操

数据准备

[root@slave2 testshell]# cp /etc/passwd ./
[root@slave2 testshell]# cat /etc/passwd
root:x:0:0:root:/root:/bin/bash
bin:x:1:1:bin:/bin:/sbin/nologin
daemon:x:2:2:daemon:/sbin:/sbin/nologin
adm:x:3:4:adm:/var/adm:/sbin/nologin
lp:x:4:7:lp:/var/spool/lpd:/sbin/nologin
sync:x:5:0:sync:/sbin:/bin/sync
shutdown:x:6:0:shutdown:/sbin:/sbin/shutdown
halt:x:7:0:halt:/sbin:/sbin/halt
mail:x:8:12:mail:/var/spool/mail:/sbin/nologin
operator:x:11:0:operator:/root:/sbin/nologin
games:x:12:100:games:/usr/games:/sbin/nologin
ftp:x:14:50:FTP User:/var/ftp:/sbin/nologin
nobody:x:99:99:Nobody:/:/sbin/nologin
systemd-network:x:192:192:systemd Network Management:/:/sbin/nologin
dbus:x:81:81:System message bus:/:/sbin/nologin
polkitd:x:999:998:User for polkitd:/:/sbin/nologin
sshd:x:74:74:Privilege-separated SSH:/var/empty/sshd:/sbin/nologin
postfix:x:89:89::/var/spool/postfix:/sbin/nologin
chrony:x:998:996::/var/lib/chrony:/sbin/nologin
elsearch:x:1000:1000::/home/elsearch:/bin/bash

搜索passwd文件以root关键字开头的所有行，并输出该行的第7列

[root@slave2 testshell]# awk -F: '/^root/{print $7}' passwd
/bin/bash

搜索passwd文件以root关键字开头的所有行，并输出该行的第1和7列,中间以逗号分割

[root@slave2 testshell]# awk -F: '/^root/{print $1","$7}' passwd
root,/bin/bash
[root@slave2 testshell]# awk -F: '/^root/{print $1$7}' passwd   
root/bin/bash

只显示/passwd文件的第一列和第七列，以逗号分割，且在所有行前面添加列名user，shell在最后一行添加“dahaige，/bin/zuishuai”

[root@slave2 testshell]# awk -F: 'BEGIN{print "user,shell"} {print $1","$7} END{print "dahaige,/bin/zuishuai"}' passwd
user,shell
root,/bin/bash
bin,/sbin/nologin
daemon,/sbin/nologin
adm,/sbin/nologin
lp,/sbin/nologin
sync,/bin/sync
shutdown,/sbin/shutdown
halt,/sbin/halt
mail,/sbin/nologin
operator,/sbin/nologin
games,/sbin/nologin
ftp,/sbin/nologin
nobody,/sbin/nologin
systemd-network,/sbin/nologin
dbus,/sbin/nologin
polkitd,/sbin/nologin
sshd,/sbin/nologin
postfix,/sbin/nologin
chrony,/sbin/nologin
elsearch,/bin/bash
dahaige,/bin/zuishuai

将passwd文件中的用户id增加数值1并输出

[root@slave2 testshell]# awk -F : -v i=1 '{print $3+i}' passwd 
1
2
3
4
5
6
7
8
9
12
13
15
100
193
82
1000
75
90
999
1001

awk的内置变量

变量	说明
FILENAME	文件名
NR	已读的记录数
NF	浏览记录的域的个数（切割后列的个数）

案例实操

统计passwd文件名，每行的行号，每行的列数

[root@slave2 testshell]# awk -F: '{print "filename:" FILENAME ", linenumber:" NR ",columns:" NF}' passwd 
filename:passwd, linenumber:1,columns:7
filename:passwd, linenumber:2,columns:7
filename:passwd, linenumber:3,columns:7
filename:passwd, linenumber:4,columns:7
filename:passwd, linenumber:5,columns:7
filename:passwd, linenumber:6,columns:7
filename:passwd, linenumber:7,columns:7
filename:passwd, linenumber:8,columns:7
filename:passwd, linenumber:9,columns:7
filename:passwd, linenumber:10,columns:7
filename:passwd, linenumber:11,columns:7
filename:passwd, linenumber:12,columns:7
filename:passwd, linenumber:13,columns:7
filename:passwd, linenumber:14,columns:7
filename:passwd, linenumber:15,columns:7
filename:passwd, linenumber:16,columns:7
filename:passwd, linenumber:17,columns:7
filename:passwd, linenumber:18,columns:7
filename:passwd, linenumber:19,columns:7
filename:passwd, linenumber:20,columns:7

切割IP

[root@slave2 testshell]# ifconfig ens33 | grep "inet "
        inet 192.168.242.22  netmask 255.255.255.0  broadcast 192.168.242.255
[root@slave2 testshell]# ifconfig ens33 | grep "inet "
        inet 192.168.242.22  netmask 255.255.255.0  broadcast 192.168.242.255
[root@slave2 testshell]# ifconfig ens33 | grep "inet " | awk -F "inet " '{print $2}'
192.168.242.22  netmask 255.255.255.0  broadcast 192.168.242.255
[root@slave2 testshell]# ifconfig ens33 | grep "inet " | awk -F "inet " '{print $2}' | awk -F " " '{print $1}'
192.168.242.22

查询sed.txt中空行所在的行号

[root@slave2 testshell]# cat sed.txt 
dong shen
guan zhen
wo  wo
lai  lai

le  le
[root@slave2 testshell]# awk '/^$/{print NR}' sed.txt 
5