第五周-day20-三剑客之awk的内置变量、条件和如何计算

运维主要工作内容:

    除了三个核心(数据不丢、7*24不宕机、提升用户体验)
        ※1.监控:
            查看网站监控,网站状态、流量(带宽)
            根据监控提示(邮件 微信 电话)进行处理
        ※2.备份:
            备份的内容(配置、数据、脚本、网站程序代码)检查备份是否能用
        ※3.代码更新上线:
            进行代码上线,代码回滚
        ※4.其他项目:
            根据需求做项目(备份、优化、监控)
        ※5.额外要求:
            生活琐事
第五周-day20-三剑客之awk.png

$3~/oldboy/ 匹配出所有第三列中以oldboy开头
$3~//{print $1,$2,$3} 匹配出第三行的前三列

1.我们先创建环境,用来练习:

mkdir -p /server/files/
cat >>/server/files/reg.txt<<EOF
Zhang Dandan    41117397   :250:100:175
Zhang Xiaoyu    390320151  :155:90:201
Meng  Feixue    80042789   :250:60:50
Wu    Waiwai    70271111   :250:80:75
Liu   Bingbing  41117483   :250:100:175
Wang  Xiaoai    3515064655 :50:95:135
Zi    Gege      1986787350 :250:168:200
Li    Youjiu    918391635  :175:75:300
Lao   Nanhai    918391635  :250:100:175
EOF
m   第一列是姓氏
m   第二列是名字
m   第一第二列合起来就是姓名
m   第三列是对应的ID号码
m   最后三列是三次捐款数量
1.显示Xiaoyu的姓氏和ID号码
2.显示第二列以 i 结尾的行
3.显示第二列以i结尾的行并且显示名字和ID
4.姓氏是Zhang的人,显示他的第二次捐款金额及她的名字
5.显示所有ID号码最后一位数字是1或5的人的全名
6.显示所有人的全名,以姓,名的格式显示,如Meng,Feixue
7.显示Xiaoyu的捐款.每个值时都有以开头如$520$200$135
显示Xiaoyu的姓氏和ID号码
[09:35 root@oldboy /tmp]# cat /server/files/reg.txt 
Zhang Dandan    41117397   :250:100:175
Zhang Xiaoyu    390320151  :155:90:201
Meng  Feixue    80042789   :250:60:50
Wu    Waiwai    70271111   :250:80:75
Liu   Bingbing  41117483   :250:100:175
Wang  Xiaoai    3515064655 :50:95:135
Zi    Gege      1986787350 :250:168:200
Li    Youjiu    918391635  :175:75:300
Lao   Nanhai    918391635  :250:100:175
显示第二列以i结尾的行
[09:36 root@oldboy /tmp]# awk '$2~/i$/' /server/files/reg.txt 
Wu    Waiwai    70271111   :250:80:75
Wang  Xiaoai    3515064655 :50:95:135
Lao   Nanhai    918391635  :250:100:175
显示第二列以i结尾的行并且显示名字和ID
[09:36 root@oldboy /tmp]# awk '$2~/i$/{print $1,$2,$3}' /server/files/reg.txt 
Wu Waiwai 70271111
Wang Xiaoai 3515064655
Lao Nanhai 918391635

姓氏是Zhang的人,显示他的第二次捐款金额及她的名字
awk -F'[:]' '$1~/Zhang/{print $3}' /server/files/reg.txt

awk -F'[:]' '$1~/Zhang/{print $1,$(NF-1)}' /server/files/reg.txt

awk -F'[: ]+' '$1~/Zhang/{print $1,$5}' /server/files/reg.txt
显示所有ID号码最后一位数字是1或5的人的全名
awk  '$3~/1$|5$/{print $1,$2}' /server/files/reg.txt 
显示所有人的全名,以姓,名的格式显示,如Meng,Feixue
awk  '{print $1","$2}' /server/files/reg.txt
显示Xiaoyu的捐款.每个值时都有以$开头.如$520$200$135 
awk -F'[:]' 'NR==2{print "$"$2"$"$3"$"$4}' /server/files/reg.txt 

 awk '{print $NF}' reg.txt |tr ':' '$'
$250$100$175
$155$90$201
$250$60$50
$250$80$75
$250$100$175
$50$95$135
$250$168$200
$175$75$300
$250$100$175

图中第一题未显示姓氏
可以利用$NF和替换tr

2.gsub(/找谁/,"替换成 什么")

gsub(/:/,"$")


3.awk的调换

awk的调换原理

awk -F: '{tmp=$1;$1=$NF;$NF=tmp;print $0 }' passwd.txt

[14:12 root@oldboy /tmp]# awk -F: '{tmp=$1;$1=$NF;$NF=tmp;print $0 }' passwd.txt 
/bin/bash x 0 0 root /root root
/sbin/nologin x 1 1 bin /bin bin
/sbin/nologin x 2 2 daemon /sbin daemon
/sbin/nologin x 3 4 adm /var/adm adm
/sbin/nologin x 4 7 lp /var/spool/lpd lp
/bin/sync x 5 0 sync /sbin sync
/sbin/shutdown x 6 0 shutdown /sbin shutdown
/sbin/halt x 7 0 halt /sbin halt
/sbin/nologin x 8 12 mail /var/spool/mail mail
/sbin/nologin x 11 0 operator /root operator

awk '{gsub(/:/,"$",$NF);print $4}' /server/files/reg.txt
image.png

4.接下来我们再创建一个环境:

head /etc/passwd >/oldboy/passwd.txt 
-F 处理的是awk怎么读取
OFS 处理的是awk怎么显示。

调换/oldboy/passwd.txt文件的第1列和最后一列的位置(不用修改文件内容)

sed的方法:
sed -nr 's#(^.*:)(.*)(/.*)#\3\1#gp' passwd.txt
awk的方法:-v 修改或创建awk内置变量
    awk -vFS=":"  '{print \$1,\$2 }' passwd.txt
    awk -F:  '{print $1,$2 }' passwd.txt 
image.png

5.※特殊 BEGIN 和END

BEGIN{ } 
    BEGIN{ }里面的内容会在awk读取文件之前运行
    进行测试
END
    END{ }里面的内容会在awk读取文件 之后运行
    显示计算结果

1>计算:

1÷3  2^10   1-100的和
[11:54 root@oldboy /tmp]# awk 'BEGIN{print 1/3,2^10,(1+100)*100/2}'
0.333333 1024 5050

2>统计 /oldboy/oldboy.txt文件中 空行的数量

wc /tmp/passwd.txt   \\wc是用来查看文件的行数
[12:00 root@oldboy /tmp]# wc /tmp/passwd.txt 
 10  10 385 /tmp/passwd.txt
[12:00 root@oldboy /tmp]# wc -l /tmp/passwd.txt  \\-l参数是只显示多少行
10 /tmp/passwd.txt

3>查看/etc/services文件中有多少空行

awk '/^$/{i=i+1;print i}' 
[12:09 root@oldboy /tmp]# awk '/^$/{i=i+1;print i}' /etc/services 
1
2
3
4
5
6
7
8
9
10
11
12
13
14
15
16
17

4>查看/etc/services文件中 空行的总数

awk '/^$/{i++}END{print i}' /etc/services  \\统计总行数
17

接下来我们要把access.zip的压缩包添加到Liunx目录下:
百度网盘链接: https://pan.baidu.com/s/1Wg37KBWPP-qXGgtY4bN2Ug 提取码: td6g
添加完成后如何解压呢?— unzip access.log命令

5>我们统计一下access.log中 第9列是200的数量

awk '$9==200{i=i+1}END{print i}' access.log  
142666

awk '$9~200{i=i+1}END{print i}' access.log  
142666

6>计算1+..100的和(必会+扩展)

[root@oldboyedu59 /oldboy]# seq 10  |awk '{i=i+$1;print i}'
1                          \\这个是计算的1+..10的和
3
6
10
15
21
28
36
45
55
seq 100|awk '{i=i+$1}END{print i}'
5050
echo 'x 101 y 50' | awk '{s+=$2}{s*=$4}END{print "sum="s}'
sum=5050
seq 5 | awk '
BEGIN{ sum=0; print "总和:" }
{print $1"+"; sum+=$1}
END{ print "等于:"; print sum }' 
总和:
1+
2+
3+
4+
5+
等于:
15
seq 100|awk '
BEGIN{sum=0;print "总和:"}
{print $1"+";sum+=$1}
END{print "So 1+..100=?";print sum}'|tail -1
5050
awk 'BEGIN{{i=1;do{print sum+=i;i++}while(i<=100)}}'| tail -1
5050    \\用while循环语法
扩展 —用计算器计算 (bc 计算器 bc -l 显示小数)
seq -s+ 100 |bc

echo {1..100} |tr ' ' '+'|bc  \\tr的意思是把空格替换成+号

seq 100 | tr "\n" "+" | sed 's#\+$#\n#g' | bc 
#  \n代表换行,用sed把以+号结尾的替换成换行符

最后编辑于
©著作权归作者所有,转载或内容合作请联系作者
  • 序言:七十年代末,一起剥皮案震惊了整个滨河市,随后出现的几起案子,更是在滨河造成了极大的恐慌,老刑警刘岩,带你破解...
    沈念sama阅读 218,122评论 6 505
  • 序言:滨河连续发生了三起死亡事件,死亡现场离奇诡异,居然都是意外死亡,警方通过查阅死者的电脑和手机,发现死者居然都...
    沈念sama阅读 93,070评论 3 395
  • 文/潘晓璐 我一进店门,熙熙楼的掌柜王于贵愁眉苦脸地迎上来,“玉大人,你说我怎么就摊上这事。” “怎么了?”我有些...
    开封第一讲书人阅读 164,491评论 0 354
  • 文/不坏的土叔 我叫张陵,是天一观的道长。 经常有香客问我,道长,这世上最难降的妖魔是什么? 我笑而不...
    开封第一讲书人阅读 58,636评论 1 293
  • 正文 为了忘掉前任,我火速办了婚礼,结果婚礼上,老公的妹妹穿的比我还像新娘。我一直安慰自己,他们只是感情好,可当我...
    茶点故事阅读 67,676评论 6 392
  • 文/花漫 我一把揭开白布。 她就那样静静地躺着,像睡着了一般。 火红的嫁衣衬着肌肤如雪。 梳的纹丝不乱的头发上,一...
    开封第一讲书人阅读 51,541评论 1 305
  • 那天,我揣着相机与录音,去河边找鬼。 笑死,一个胖子当着我的面吹牛,可吹牛的内容都是我干的。 我是一名探鬼主播,决...
    沈念sama阅读 40,292评论 3 418
  • 文/苍兰香墨 我猛地睁开眼,长吁一口气:“原来是场噩梦啊……” “哼!你这毒妇竟也来了?” 一声冷哼从身侧响起,我...
    开封第一讲书人阅读 39,211评论 0 276
  • 序言:老挝万荣一对情侣失踪,失踪者是张志新(化名)和其女友刘颖,没想到半个月后,有当地人在树林里发现了一具尸体,经...
    沈念sama阅读 45,655评论 1 314
  • 正文 独居荒郊野岭守林人离奇死亡,尸身上长有42处带血的脓包…… 初始之章·张勋 以下内容为张勋视角 年9月15日...
    茶点故事阅读 37,846评论 3 336
  • 正文 我和宋清朗相恋三年,在试婚纱的时候发现自己被绿了。 大学时的朋友给我发了我未婚夫和他白月光在一起吃饭的照片。...
    茶点故事阅读 39,965评论 1 348
  • 序言:一个原本活蹦乱跳的男人离奇死亡,死状恐怖,灵堂内的尸体忽然破棺而出,到底是诈尸还是另有隐情,我是刑警宁泽,带...
    沈念sama阅读 35,684评论 5 347
  • 正文 年R本政府宣布,位于F岛的核电站,受9级特大地震影响,放射性物质发生泄漏。R本人自食恶果不足惜,却给世界环境...
    茶点故事阅读 41,295评论 3 329
  • 文/蒙蒙 一、第九天 我趴在偏房一处隐蔽的房顶上张望。 院中可真热闹,春花似锦、人声如沸。这庄子的主人今日做“春日...
    开封第一讲书人阅读 31,894评论 0 22
  • 文/苍兰香墨 我抬头看了看天上的太阳。三九已至,却和暖如春,着一层夹袄步出监牢的瞬间,已是汗流浃背。 一阵脚步声响...
    开封第一讲书人阅读 33,012评论 1 269
  • 我被黑心中介骗来泰国打工, 没想到刚下飞机就差点儿被人妖公主榨干…… 1. 我叫王不留,地道东北人。 一个月前我还...
    沈念sama阅读 48,126评论 3 370
  • 正文 我出身青楼,却偏偏与公主长得像,于是被迫代替她去往敌国和亲。 传闻我的和亲对象是个残疾皇子,可洞房花烛夜当晚...
    茶点故事阅读 44,914评论 2 355