目錄
- linux三劍客之awk
- 1、awk的語法
- 2、引數
- 3、awk的生命周期
- 4、awk中的預定義變數
- 5、awk處理規則的執行流程
- 6、awk中的函式
- 7、awk中的定位
- 1、正則運算式
- 2、比較運算式(作用的是文本內的內容)
- 3、邏輯運算式
- 4、算術運算式
- 5、條件運算式(作用的是文本外的內容)
- 6、范圍運算式
- 8、流程控制
- if用法
- for用法
- while用法
linux三劍客之awk
適用范圍：awk主要是用來格式化文本，
1、awk的語法
語法格式：awk [引數] [處理規則] [操作物件]
2、引數
| 引數 | 作用 |
|---|---|
| -F | 指定文本分隔符（不寫默認是以空格作為分隔符） |
3、awk的生命周期
grep、sed和awk都是讀一行處理一行，直至處理完成，
1、接收一行作為輸入
2、把剛剛讀入進來得到文本進行分解
3、使用處理規則處理文本
4、輸入一行，賦值給$0，直至處理完成
5、把處理完成之后的所有的資料交給END{}來再次處理
4、awk中的預定義變數
| 變數 | 作用 |
|---|---|
| $0 | 代表當前行 |
| $n | 代表第n列 |
| NF | 代指當前行的總欄位數 |
| NR | 代指行號 |
| FS | 指定文本內容分隔符,優先級要高于 -F，默認是空格 |
| OFS | 指定列印的分隔符，是自定義的分隔符，默認是空格 |
# NF（代指數字，每行被分割后的總欄位數）
[root@zonghan ~]# cat 8.txt
asfsdgs asdsad asdasdsa
sdfsdfas sadasdsad
aSD asd
asd asdsad sad
asdasd
asdasdas sadsadasd
asdasd asdsadssfgsad sadsa
[root@zonghan ~]# awk '{print NF}' 8.txt
3
2
2
3
1
2
3
0
[root@zonghan ~]# awk '{print $NF}' 8.txt
asdasdsa
sadasdsad
asd
sad
asdasd
sadsadasd
sadsa # $NF就是變相于列印NF所代表的列，又因為NF是總欄位數，所以是列印最后一列
# $0（代指代表當前行）
[root@zonghan ~]# awk -F: '{print $0, "---"}' 8.txt
asfsdgs asdsad asdasdsa ---
sdfsdfas sadasdsad ---
aSD asd ---
asd asdsad sad ---
asdasd ---
asdasdas sadsadasd ---
asdasd asdsadssfgsad sadsa ---
--- # 由此可以得出$0是代指的每一行的內容
# $n (代表第n列)
[root@zonghan ~]# awk '{print $1}' 8.txt
asfsdgs
sdfsdfas
aSD
asd
asdasd
asdasdas
asdasd # 列印的是第1列
[root@zonghan ~]# awk '{print $2}' 8.txt
asdsad
sadasdsad
asd
asdsad
# 這里因為文本沒第二列 所以為空
sadsadasd
asdsadssfgsad # 列印的是第2列
# NR(代指行號)
[root@zonghan ~]# awk '{print NR}' 8.txt
1
2
3
4
5
6
7
8
# FS(指定文本內容分隔符,優先級要高于 -F，默認是空格)
[root@zonghan ~]# cat /etc/passwd
root:x:0:0:root:/root:/bin/bash
bin:x:1:1:bin:/bin:/sbin/nologin
daemon:x:2:2:daemon:/sbin:/sbin/nologin
[root@zonghan ~]# awk -F: 'BEGIN{FS="x"}{print $NF}' /etc/passwd
:0:0:root:/root:/bin/bash
:1:1:bin:/bin:/sbin/nologin
:2:2:daemon:/sbin:/sbin/nologin # 這里可以看出是以x分割而不是以-F的:分割的，所以優先級高于-F
# 0FS(指定列印的分隔符，自定義的分隔符，默認是空格)
[root@zonghan ~]# awk -F: 'BEGIN{OFS=">>>"}{print $1, $NF}' /etc/passwd
root>>>/bin/bash
bin>>>/sbin/nologin
daemon>>>/sbin/nologin
5、awk處理規則的執行流程
# 至少1個，最多4個 按以下順序
BEGIN{} # 括號里面內容會在awk讀取檔案之前執行
// # 正則運算式
{} # 回圈
END{} # 括號里面內容會在awk讀取檔案之后執行
6、awk中的函式
| 函式名 | 作用 |
|---|---|
| 列印 | |
| printf | 格式化列印 |
| %s | 字串 |
| %d | 數字 |
| - | 左對齊 |
| + | 右對齊 |
| 15 | 至少占用15字符 |
# 格式化列印
[root@zonghan ~]# awk -F: 'BEGIN{OFS=" | "}{printf "|%s|%s|\n", $1, $NF}' /etc/passwd
|root|/bin/bash|
|bin|/sbin/nologin|
|daemon|/sbin/nologin|
[root@zonghan ~]# awk -F: 'BEGIN{OFS=" | "}{printf "|%-15s|%s|\n", $1, $NF}' /etc/passwd
|root |/bin/bash|
|bin |/sbin/nologin|
|daemon |/sbin/nologin|
[root@zonghan ~]# awk -F: 'BEGIN{OFS=" | "}{printf "|%-15s|%-15s|\n", $1, $NF}' /etc/passwd
|root |/bin/bash |
|bin |/sbin/nologin |
|daemon |/sbin/nologin |
[root@zonghan ~]# awk -F: 'BEGIN{OFS=" | "}{printf "|%+15s|%+15s|\n", $1, $NF}' /etc/passwd
| root| /bin/bash|
| bin| /sbin/nologin|
| daemon| /sbin/nologin|
[root@zonghan ~]# awk -F: 'BEGIN{OFS=" | "}{printf "|%+15s|%-15s|\n", $1, $NF}' /etc/passwd
| root|/bin/bash |
| bin|/sbin/nologin |
| daemon|/sbin/nologin |
7、awk中的定位
1、正則運算式
# 列印出包含root的所有行
[root@zonghan ~]# awk -F: '/root/{print $0}' /etc/passwd
root:x:0:0:root:/root:/bin/bash
operator:x:11:0:operator:/root:/sbin/nologin
# 列印以root開頭的所有行
[root@zonghan ~]# awk -F: '/^root/{print $0}' /etc/passwd
root:x:0:0:root:/root:/bin/bash
2、比較運算式(作用的是文本內的內容)
| 符號 | 作用 |
|---|---|
| > | 篩選大于的資料 |
| >= | 篩選大于等于的資料 |
| < | 篩選小于的資料 |
| <= | 篩選小于等于的資料 |
| ~ | 包含(和正則連用) |
| !~ | 不包含(和正則連用) |
# 列印第四列比第三列數值大的所有行資訊
[root@zonghan ~]# awk -F: '$4>$3{print $0}' /etc/passwd
adm:x:3:4:adm:/var/adm:/sbin/nologin
lp:x:4:7:lp:/var/spool/lpd:/sbin/nologin
mail:x:8:12:mail:/var/spool/mail:/sbin/nologin
games:x:12:100:games:/usr/games:/sbin/nologin
ftp:x:14:50:FTP User:/var/ftp:/sbin/nologin
# 結尾包含bash的行
[root@zonghan ~]# awk -F: '$NF ~ /bash/{print $0}' /etc/passwd
root:x:0:0:root:/root:/bin/bash
haha:x:1000:1000::/home/haha:/bin/bash
test1:x:1001:1000::/home/test1:/bin/bash
# 結尾不包含bash的行
[root@zonghan ~]# awk -F: '$NF !~ /bash/{print $0}' /etc/passwd
bin:x:1:1:bin:/bin:/sbin/nologin
daemon:x:2:2:daemon:/sbin:/sbin/nologin
adm:x:3:4:adm:/var/adm:/sbin/nologin
lp:x:4:7:lp:/var/spool/lpd:/sbin/nologin
3、邏輯運算式
| 符號 | 作用 |
|---|---|
| && | 邏輯與 |
| | | | 邏輯或 |
| ! | 邏輯非 |
# 列印第3列和第4列既要相加大于2000又要相乘大于2000的所有行
[root@zonghan ~]# awk -F: '$3+$4>2000 && $3*$4>2000{print $0}' /etc/passwd
test1:x:1001:1000::/home/test1:/bin/bash
test2:x:1002:1000::/home/test2:/bin/bash
data:x:2000:2000::/home/data:/bin/bash
aaa:x:2001:2001::/home/aaa:/bin/bash
bbb:x:2002:2001::/home/bbb:/bin/bash
ddd:x:2003:1000::/home/ddd:/bin/bash
eee:x:1999:1999::/home/eee:/bin/bash
fff:x:1500:1500::/home/fff:/bin/bash
# 列印第3列和第4列相加大于2000或者相乘大于2000的所有行
[root@zonghan ~]# awk -F: '$3+$4>2000 || $3*$4>2000{print $0}' /etc/passwd
daemon:/dev/null:/sbin/nologin
abrt:x:173:173::/etc/abrt:/sbin/nologin
sshd:x:74:74:Privilege-separated SSH:/var/empty/sshd:/sbin/nologin
postfix:x:89:89::/var/spool/postfix:/sbin/nologin
haha:x:1000:1000::/home/haha:/bin/bash
test1:x:1001:1000::/home/test1:/bin/bash
test2:x:1002:1000::/home/test2:/bin/bash
data:x:2000:2000::/home/data:/bin/bash
aaa:x:2001:2001::/home/aaa:/bin/bash
bbb:x:2002:2001::/home/bbb:/bin/bash
ddd:x:2003:1000::/home/ddd:/bin/bash
eee:x:1999:1999::/home/eee:/bin/bash
fff:x:1500:1500::/home/fff:/bin/bash
# 列印第3列和第4列相加不大于2000或者相乘不大于2000的所有行
[root@zonghan ~]# awk -F: '!($3+$4>2000 || $3*$4>2000){print $0}' /etc/passwd
root:x:0:0:root:/root:/bin/bash
bin:x:1:1:bin:/bin:/sbin/nologin
daemon:x:2:2:daemon:/sbin:/sbin/nologin
adm:x:3:4:adm:/var/adm:/sbin/nologin
lp:x:4:7:lp:/var/spool/lpd:/sbin/nologin
sync:x:5:0:sync:/sbin:/bin/sync
shutdown:x:6:0:shutdown:/sbin:/sbin/shutdown
halt:x:7:0:halt:/sbin:/sbin/halt
mail:x:8:12:mail:/var/spool/mail:/sbin/nologin
operator:x:11:0:operator:/root:/sbin/nologin
games:x:12:100:games:/usr/games:/sbin/nologin
ftp:x:14:50:FTP User:/var/ftp:/sbin/nologin
4、算術運算式
| 符號 | 作用 |
|---|---|
| + | 加 |
| - | 減 |
| * | 乘 |
| / | 除 |
| == | 等于 |
| % | 余 |
# 列印第3列加第4列數值大于3000(屬主+屬組>3000)的行
[root@zonghan ~]# awk -F: '$3+$4>3000{print $0}' /etc/passwd
data:x:2000:2000::/home/data:/bin/bash
aaa:x:2001:2001::/home/aaa:/bin/bash
bbb:x:2002:2001::/home/bbb:/bin/bash
ddd:x:2003:1000::/home/ddd:/bin/bash
eee:x:1999:1999::/home/eee:/bin/bash
# 列印第3列乘第4列數值大于50(屬主+屬組>3000)的行
[root@zonghan ~]# awk -F: '$3*$4<50{print $0}' /etc/passwd
root:x:0:0:root:/root:/bin/bash
bin:x:1:1:bin:/bin:/sbin/nologin
daemon:x:2:2:daemon:/sbin:/sbin/nologin
adm:x:3:4:adm:/var/adm:/sbin/nologin
lp:x:4:7:lp:/var/spool/lpd:/sbin/nologin
sync:x:5:0:sync:/sbin:/bin/sync
# 列印所有奇數行
[root@zonghan ~]# awk -F: 'NR%2==1{print $0}' /etc/passwd
root:x:0:0:root:/root:/bin/bash
daemon:x:2:2:daemon:/sbin:/sbin/nologin
lp:x:4:7:lp:/var/spool/lpd:/sbin/nologin
shutdown:x:6:0:shutdown:/sbin:/sbin/shutdown
mail:x:8:12:mail:/var/spool/mail:/sbin/nologin
games:x:12:100:games:/usr/games:/sbin/nologin
nobody:x:99:99:Nobody:/:/sbin/nologin
dbus:x:81:81:System message bus:/:/sbin/nologin
5、條件運算式(作用的是文本外的內容)
| 符號 | 限制條件 |
|---|---|
| == | 相等 |
| > | 大于 |
| >= | 大于等于 |
| < | 小于 |
| <= | 小于等于 |
# 列印第3行的內容
[root@zonghan ~]# awk -F: 'NR==3{print $0}' /etc/passwd
daemon:x:2:2:daemon:/sbin:/sbin/nologin
# 列印前4行的的內容
[root@zonghan ~]# awk -F: 'NR<=4{print $0}' /etc/passwd
root:x:0:0:root:/root:/bin/bash
bin:x:1:1:bin:/bin:/sbin/nologin
daemon:x:2:2:daemon:/sbin:/sbin/nologin
adm:x:3:4:adm:/var/adm:/sbin/nologin
6、范圍運算式
| 符號 | 作用 |
|---|---|
| 逗號 ， | 什么行至什么行 |
# 列印出以root開頭的行到以ftp開頭的行
[root@zonghan ~]# awk -F: '/^root/,/^ftp/{print $0}' /etc/passwd
root:x:0:0:root:/root:/bin/bash
bin:x:1:1:bin:/bin:/sbin/nologin
daemon:x:2:2:daemon:/sbin:/sbin/nologin
mail:x:8:12:mail:/var/spool/mail:/sbin/nologin
operator:x:11:0:operator:/root:/sbin/nologin
games:x:12:100:games:/usr/games:/sbin/nologin
ftp:x:14:50:FTP User:/var/ftp:/sbin/nologin
8、流程控制
特別注意：只存在回圈{ }之中
| 符號 | 用法 |
|---|---|
| if | 判斷 |
| for | 回圈 |
| while | 回圈 |
if用法
語法:
{ if ( ) { } }
{ if ( ) { } else { } }
{ if ( ) { } else if ( ) { } else { } }
# 判斷第3行與第4行數值的大小，輸出比較結果
[root@zonghan ~]# awk -F: '{if($3>$4){print "大于"} else {print "小于等于"}' /etc/passwd
小于等于
小于等于
小于等于
小于等于
小于等于
大于
大于
for用法
語法：
{ for (i=初始值; 條件判斷; 游標) { } }
# 每行列印3次
[root@zonghan ~]# awk -F: '{for(i=0;i<3;i++1){print $0}}' /etc/passwd
root:x:0:0:root:/root:/bin/bash
root:x:0:0:root:/root:/bin/bash
root:x:0:0:root:/root:/bin/bash
bin:x:1:1:bin:/bin:/sbin/nologin
bin:x:1:1:bin:/bin:/sbin/nologin
bin:x:1:1:bin:/bin:/sbin/nologin
daemon:x:2:2:daemon:/sbin:/sbin/nologin
daemon:x:2:2:daemon:/sbin:/sbin/nologin
daemon:x:2:2:daemon:/sbin:/sbin/nologin
...
while用法
語法 :
{ i=初始值 ; while(條件判斷) { } }
# 每行列印3次
[root@zonghan ~]# awk -F: '{i=0;while(i<3){i++;print $0}}' /etc/passwd
root:x:0:0:root:/root:/bin/bash
root:x:0:0:root:/root:/bin/bash
root:x:0:0:root:/root:/bin/bash
bin:x:1:1:bin:/bin:/sbin/nologin
bin:x:1:1:bin:/bin:/sbin/nologin
bin:x:1:1:bin:/bin:/sbin/nologin
daemon:x:2:2:daemon:/sbin:/sbin/nologin
daemon:x:2:2:daemon:/sbin:/sbin/nologin
daemon:x:2:2:daemon:/sbin:/sbin/nologin
...
# 如果想列印i數字的變化，可以在print里加上i++
[root@zonghan ~]# awk -F: '{i=0;while(i<3){print $0, i++}}' /etc/passwd
root:x:0:0:root:/root:/bin/bash 0
root:x:0:0:root:/root:/bin/bash 1
root:x:0:0:root:/root:/bin/bash 2
bin:x:1:1:bin:/bin:/sbin/nologin 0
bin:x:1:1:bin:/bin:/sbin/nologin 1
bin:x:1:1:bin:/bin:/sbin/nologin 2
daemon:x:2:2:daemon:/sbin:/sbin/nologin 0
daemon:x:2:2:daemon:/sbin:/sbin/nologin 1
daemon:x:2:2:daemon:/sbin:/sbin/nologin 2
...
轉載請註明出處，本文鏈接：https://www.uj5u.com/caozuo/390192.html
標籤：Linux
上一篇：Linux磁盤管理
下一篇：Linux三劍客命令—awk