目錄
awk流程控制陳述句
1.條件判斷陳述句
2.回圈陳述句
3.其他陳述句
awk陣列
陣列語法格式
for回圈讀取陣列的值
陣列相關函式
多維陣列
陣列的相關應用
awk內置函式
練習
awk流程控制陳述句
1.條件判斷陳述句
單分支
# if(condition) statement1
awk -F: '{if($3>500)print $1;$7}' /etc/passwd
# if(condition) statement1 ; else statement2
awk -F: '{if($3>500)print $1;else print$3}' /etc/passwdawk分支結構允許嵌套，大致格式如下：
每條命令陳述句后面使用分號;結尾
awk -F: '{if($1=="root")print $1;else if($1=="ftp")print $2;else if($1=="mail")print $3;else print NR}' /etc/passwd
cat /etc/passwd |awk -F: 'BEGIN{num1=0;num2=0} {if (length($2)<=2) {print $1;num1++} else {num2++;print $1}}END{print "有"num1"個用戶沒有設定密碼,有"num2"個用戶設定了密碼"}'2.回圈陳述句
while陳述句
示例如下：
awk 'BEGIN{
total=100;x=0;
while(i<=total){
x+=i;
i++;
}
print x;
}'
5050
for回圈
代碼示例如下：
# 定義陣列，for回圈取出陣列里的值
awk -F: 'BEGIN{a[0]}{a[$3]=$1}END{for (i in a) print a[i] }' /etc/passwd
# 利用for的條件回圈
awk 'BEGIN { for (i = 1; i <= 10; i++) print i }'
do...while陳述句
代碼示例如下
awk 'BEGIN{
total=0;i=0;
do {total+=i;i++;} while(i<=100)
print total;
}'
5050
3.其他陳述句
- break 一般用于 while 或 for 陳述句，退出程式回圈，
- continue continue 陳述句用于 while 或 for 陳述句，在回圈體內部結束本次回圈，從而直接進入下一次回圈迭代，
- exit
[root@kafka01 ~]# cat /etc/passwd|awk -F: '{print $1;print$2;exit;print $3}'
root
x
[root@kafka01 ~]# cat /etc/passwd|awk -F: 'BEGIN{print "start";exit;}NR==1{print $0}END{print "end"}'
start
end
因為跳出了awk命令，所以后面的 print 陳述句不再執行.當 awk 陳述句中有 “exit” 和 “END{commands} 陳述句塊” 的時候，exit 并不是表示退出awk命令；而是表示直接執行 END{commands} 陳述句塊中的內容，
-
next 讀取下一條記錄；awk回圈逐行匹配時，如果遇到next，就會跳過當前行，直接忽略下面陳述句進行下一行匹配，如果我們有一行內容不需要 awk 處理，那么我們就可以使用 “next” 來告訴 awk 哪一行內容不需要處理
# 當行號除以2余1，就跳過當前行，
[root@kafka01 1-6awk]# cat url.txt |awk 'NR%2==1{next}{print NR,$0}'
2 http://www.sina.com
4 http://www.12306.cn
6 feng@qq.com
8 meng.xianhui@yahoo.cn
10 10001@qq.com
awk陣列
首先我們介紹一下陣列
陣列語法格式
array_name[index]=value
- array_name：陣列的名稱
- index：陣列索引
- value：陣列中元素所賦予的值
數字和字串都可以做陣列的索引(下標)
for回圈讀取陣列的值
awk -F: 'BEGIN{a[0]}{a[$3]=$1}END{for (i in a) print a[i] }' /etc/passwdBEGIN{a[0]}定義一個陣列a, a[0]是陣列初始化的操作
a[$3]=$1把uid做key，用戶名做value
for (i in a) print a[i] 使用for回圈取出a陣列里的key，然后輸出對應的value， i對應a陣列里的key
for…in回圈輸出時候，默認列印出來是無序陣列，
cat number.txt
81 90
62 30
43 85
34 53
15 77
# 默認列印出來的是無序陣列
awk '{a[$1]=$2}END{for (i in a) print i,a[i]}' number.txt
15 77
34 53
43 85
62 30
81 90
陣列相關函式
1.length 統計陣列的長度
awk -F: 'BEGIN{a[0]}{a[$3]=$1}END{for (i in a) print a[i];print length(a) }' /etc/passwd
length回傳字串以及陣列長度，split分割字串info，動態創建陣列A，回傳值也是陣列長度，
awk 'BEGIN{info="it is a test";lens=split(info,A," ");print length(A),lens,A[2];}'
4 4 is
2. 排序函式
asort 對 value 排序，回傳陣列元素的個數，排序后，陣列下標改為從1到陣列的長度，
asorti 對 key 排序，回傳陣列元素的個數，
對上面的例子，我們對它分別使用asort和asorti排序：
asort排序
awk '{a[$1]=$2}END{t=asort(a,b);for (i=1;i<=t;i++) print i"\t"a[i]"\t"b[i]}' number.txt
1 30
2 53
3 77
4 85
5 90
END陳述句中 asort 對陣列a的值進行排序，把排序后的下標存入新生成的陣列b中，丟棄陣列a下標值，再回傳陣列a的長度，將其賦值給變數t，
b[1]=30
b[2]=53
b[3]=77
b[4]=85
b[5]=90
a 陣列原封未動，b陣列首先拷貝自 a 陣列，然后在 b 陣列上排序，
例子中無法輸出 a 陣列的原因是，a 的索引為與傳入的 1,2,3,4,5 不匹配，故沒有內容輸出
陣列的值是無法直接輸出的，如果想要得到排序的結果，則必需使用 for(i=1;i<length;i++) 的形式，因為 for(i in a) 的形式不能有序輸出結果，
asorti排序
awk '{a[$1]=$2}END{t=asorti(a,b);for (i=1;i<=t;i++) print i,b[i],a[b[i]]}' number.txt
1 15 77
2 34 53
3 43 85
4 62 30
5 81 90
b[1]=15
b[2]=34
b[3]=43
b[4]=62
b[5]=81 b[i]中存的是索引值
END中 asorti 對陣列a的下標進行排序，并把排序后的下標存入新生成的陣列b中，并把陣列a的長度賦值給變數t，asorti(a,b)，得到排序后的索引，再將其代入未改變的 a，即a[b[i]]，則可以得到索引對應的值，
多維陣列
awk在存盤上并不支持多維陣列，不過我們可以很容易地使用一維陣列模擬實作多維陣列，awk提供了邏輯上模擬二維陣列的方式，比如，array[0,0]這樣的方式是允許的
如下示例為一個 3x3 的二維陣列：
100 200 300 400 500 600 700 800 900
以上實體中，array[0][0] 存盤 100，array[0][1] 存盤 200 ，依次類推，為了在 array[0][0] 處存盤 100, 我們可以使用如下語法： array["0,0"] = 100，
我們使用了 0,0 作為索引，但是這并不是兩個索引值，而是一個字串索引 0,0
# 定義多維陣列
awk 'BEGIN {
array["0,0"] = 100;
array["0,1"] = 200;
array["0,2"] = 300;
array["1,0"] = 400;
array["1,1"] = 500;
array["1,2"] = 600;
# 輸出陣列元素
print "array[0,0] = " array["0,0"];
print "array[0,1] = " array["0,1"];
print "array[0,2] = " array["0,2"];
print "array[1,0] = " array["1,0"];
print "array[1,1] = " array["1,1"];
print "array[1,2] = " array["1,2"];
}'陣列的相關應用
1.某一列有重復的值，而對應的另一列內容不一樣，想實作一個累加功能，如：計算以下每個學生的總分(chinese+math的成績)，輸出以下格式
cat student.txt
name course grade
rose chinese 80
jack math 90
rose math 89
jack chinese 99
tom chinese 60
tom math 83
jons math 82
# 輸出以下格式(名字輸出順序隨意)
rose 169
jack 189
tom 143
jons 82
# 答案
cat student.txt | awk 'NR>1{name[$1]+=$3}END{for (i in name) print i,name[i]}'
2.多維陣列實作九九乘法
awk 'BEGIN{
for(i=1;i<=9;i++){
for(j=1;j<=9;j++){
x[i,j]=i*j; print i,"*",j,"=",x[i,j];
}
}
}'awk內置函式
挑幾個自己常用的來寫一下，具體大家可以 man awk 有許多內置函式
1.length 計算字符數目的函式 可以直接計算出字串的數目很方便
# 檢查有無空口令用戶
awk -F: 'length($2)<3 {print $1}' /etc/shadow
# 上次我們說過密碼欄位為*、!!表示沒有設定密碼
# 顯示檔案中超過60個字符的行
awk 'length($0)>60 {print NR,$0}' /etc/passwd
2.system函式 執行shell命令
批量創建和洗掉檔案、用戶等很方便
[root@kafka01 ~]# cat list
xixi 123
haha 456
hehe 789
[root@kafka01 ~]# awk '{system("useradd "$1)}' list
[root@kafka01 ~]# ls /home
haha hehe hello xixi
[root@kafka01 ~]# awk '{system("userdel -r "$1)}' list
[root@kafka01 ~]# ls /home
hello
# 思考如何利用system函式給上述用戶配置密碼3.substr 截取字串 可以指定截取位置的字串
# 切片第一個字母到第三個
cat /etc/passwd|awk -F: '{print substr($1,1,3)}' awk還內置了算數函式、字串函式和時間函式等，還有很多有意思的函式等你去探索！
練習
1.求出3個人累計消費的金額，按照金額的大小排降序
[root@kafka01 0426test]# cat money.txt
username money
feng 100
feng 200
feng 350
li 200
li 239
li 890
zhang 100
zhang 350
# 答案
[root@kafka01 0426test]# awk 'NR>1 {a[$1]+=$2}END{for (i in a) print i,a[i]}' money.txt |sort -k 2
li 1329
feng 650
zhang 450
2.利用awk的if多分支判斷用戶的型別，uid為0顯示為"管理員"，如果是uid在1~999之間，為"程式用戶"，uid大于等于1000，為'普通用戶"，并統計他們的數量，最后輸出時，格式如下：
xxx 是 xxx；xxx 是 xxx；xxx 是 xxx.....
管理員有x個;程式用戶有x個;普通用戶有x個;總共有x個用戶 或輸出
管理員有：xxx,... 數量有: ，程式用戶有：xxx... 數量有: ，普通用戶有：xxx... 數量有:
cat /etc/passwd|awk -F: 'BEGIN{a=0;b=0;c=0}{if ($3==0){print $1"是管理員";a++}else if ($3>1 && $3<=999){print $1"是程式用戶";b++}else {print $1"是普通用戶";c++}}END{print "總共有",a+b+c,"個用戶"}' 用陣列的方式來寫：
# 利用陣列
# 將三種類別分為三個組 value存盤的是三種類別的用戶名 然后利用字串拼接起來
awk -F: 'BEGIN{super=0;admin=0;user=0;admin1="";user1=""}
{if($3==0){super=super+1;A[super]=$1}
else if($3>0&&$3<=999){admin=admin+1;B[admin]=$1}
else {user=user+1;C[user]=$1}}
END{
for (k in A){print "管理員有",A[k],"數量是",super};
for (k in B){admin1=admin1 " " B[k]};print "程式用戶有",admin1,"數量是",admin;
for (k in C){user1=user1 " " C[k]};print "普通用戶有",user1,"數量是",user;
print "總共有",admin+super+user,"個用戶"}' /etc/passwd
直接用字串拼接不使用陣列
awk -F: 'BEGIN{super=0;admin=0;user=0;a="";b="";c=""}
{
if ($3==0){super++;a=a" "$1}
else if($3>0 && $3<1000){admin++;b=b" "$1}
else {user++;c=c" "$1;}
}
END{print "管理員有:",a,"數量為:",super,
"\n程式用戶有:",b,"數量為:",admin,
"\n普通用戶有:",c,"數量為:",user,
"\n總共有",super+admin+user"個用戶"}' /etc/passwd
3.利用awk的system命令在/tmp下建立和洗掉/etc/passwd中與用戶名同名的目錄
awk -F: '{system("mkdir /tmp/"$1)}' /etc/passwd
awk -F: '{system("rm -rf /tmp/"$1)}' /etc/passwd
4.awk進行行求和
echo 1 2 3 4 5|awk '{for (i=1;i<=NF;i++) sum+=$i;print sum}'
15
seq -s ' ' 100 | awk '{for(i=1;i<=NF;i++) sum+=$i; print sum}'
5050
其他類似于：統計出ftp下載量最大的5個ip地址累計下載的總大小(以M為單位)；進行下載流量排序；統計每個URL的每分鐘的頻率等常見面試題其實都是要用到陣列的，要熟練使用
awk系列就到這里了，經過這兩天的學習我了解到awk是一個很強大的命令，我們所知道的只是它的一小部分，但單單一小部分就夠我們使用了，其實Linux中每一個命令都很強大，都值得我們去認真學習！所以，一起加油吧！
PS：文章要有寫的不太對的地方歡迎評論私信我一起交流呀！
轉載請註明出處，本文鏈接：https://www.uj5u.com/qita/404232.html
標籤：其他
上一篇：Debian/Ubuntu 安裝釘釘官方Linux版(支持在線更新)
下一篇：Linux相關內容（四）