day5-文件管理复杂命令(下载、上传、查找、内容处理)

联网下载文件(wget 、curl)

wget:下载文件

1、CentOS7系统最小化安装默认没有wget命令,需要进行安装

[root@oldboyedu ~]# yum install wget -y

2、在linux上使用wget命令进行下载,需先找到我们需要下载的资源(默认下载到当前目录来)

wget+下载的资源

3、由于我们下载的是文件,所以我们可以使用cat  less  more查看该文件

4、使用wget下载资源时,指定保存的位置,并重新命名

例如:[root@oldboyedu ~]# wget -O /opt/tt.png http://fj.xuliangwei.com/public/ks.jpeg

5、下载资源时,如果不想重新命名只想修改保存的路径,请带上原有的名称

例如:[root@oldboyedu ~]# wget -O /opt/ks.jpeg http://fj.xuliangwei.com/public/ks.jpeg

curl:浏览网络上的资源

1、在线浏览网站资源内容(源代码)

curl+浏览的网站资源

2、使用curl讲内容保存至本地,并重命名(如果没有明确指定路径,则表示当前目录)

例如:[root@oldboyedu ~]# curl -o wei.txt http://fj.xuliangwei.com/public/weixin.py

3、将资源保存至指定的路径

例如:[root@oldboyedu ~]# curl -o /opt/weixin.py http://fj.xuliangwei.com/public/weixin.py

PS:通常情况下我们推荐使用wget下载,但由于系统很多时候默认没有按照wget,会偶尔使用一下curl

PS;最后执行一条命令检查:yum makecache

上传下载文件

如果无法将文件直接拖拽进linux服务器

      1、要么没有安装lrzsz,建议安装,想关命令:yum install lrzsz -y

      2、你上传的就是一个空文件,文件里面必须要有内容

rz:只能上传文件,不支持上传文件夹,不支持大于4个G上传,也不支持断点续传

sz:只能下载文件(任意单个文件)不支持下载文件夹

文件或命令查找(which   whereis   find)

当我们想执行一个命令的绝对路径时,先使用which   command  查询绝对路径

1、which ls   查找ls命令的绝对路径

2、whereis 也使用来查询命令的绝对路径

          whereis ls  查找命令的路径、帮助手册等

           whereis -b ls   仅显示命令所在的路径

3、对于内核相关的一些命令,使用which whereis是无法查询到,需要使用type命令查询

           type -a ls:查看命令的绝对路径(包括别名)

#对于后面要使用一个命令的绝对时

文件内容处理命令(sort  uniq  cut  sed  awk  wc )

sort:排序

       -r:倒序

      -n:按数字排序

      -t:指定分隔符(默认空格)

      -k:指定第几列,指定几列几字符(指定1,1  3.1 ,3.3)

例如:1.首先创建一个文件,写入一写无序的内容

[root@xuliangwei ~]# cat >> file.txt <<EOF

b:3

c:2

a:4

e:5

d:1

f:11

EOF

2.使用sort下面对输出的内容进行排序

[root@xuliangwei ~]# sort file.txt

a:4

b:3

c:2

d:1

e:5

f:11

结果并不是按照数字排序,而是按字母排序。可以使用-t指定分隔符, 使用-k指定需要排序的列。

[root@xuliangwei ~]# sort -t ":" -k2 sort.txt

d:1

f:11      第二行为什么是11?不应该按照顺序排列?

c:2

b:3

a:4

e:5

按照排序的方式, 只会看到第一个字符,11的第一个字符是1, 按照字符来排序确实比2小。

如果想要按照数字的方式进行排序, 需要使用 -n参数。

[root@xuliangwei ~]# sort -t ":" -n -k2 p.txt

d:1

c:2

b:3

a:4

e:5

f:11

例题2:http://fj.xuliangwei.com/public/ip.txt,对该文件进行排序

[root@xuliangwei ~]# sort -t. -k3.1,3.1nr -k4.1,4.3nr ip.txt


uniq:去重

      -c:计算重复的行

例如:1.创建一个file.txt文件:

[root@xuliangwei ~]# cat >>file1.txt <<EOF

abc

123

abc

123

EOF

2.uniq需要和sort一起使用, 先使用sort排序, 让重复内容连续在一起

[root@xuliangwei ~]# sort file.txt

123

123

abc

abc

3.使用uniq去除相邻重复的行

[root@xuliangwei ~]# sort file.txt |uniq

123

abc

4.-c参数能统计出文件中每行内容重复的次数

[root@xuliangwei ~]# sort file.txt |uniq -c

2 123

2 abc


cut:截取文件

       -d:指定分隔符

       -f:数字,取第几列,如:-f3,6 取第3列和第6列

       -c:按字符取(空格也算)

awk:截取文件(很重要,常用命令)

       -F:指定分隔符

例如:[root@oldboyedu ~]# cat >>file2.txt <<EOF

Im xlw, is QQ 552408925

EOF

筛选出文件里 xlw以及552408925

[root@oldboyedu ~]# awk '{print $2,$5}' file2.txt | awk -F "," '{print $1,$2}'

xlw 552408925

[root@oldboyedu ~]# cut -d " " -f 2,5 file2.txt | awk -F "," '{print $1,$2}'

xlw 552408925

[root@oldboyedu ~]# cut -d " " -f 2,5 file2.txt | sed 's#,##g'

xlw 552408925

[root@oldboyedu ~]# sed 's#,##g' file2.txt | awk '{print $2,$5}'

xlw 552408925

PS: 实际生产使用过程中,很少使用到cut,通常都是使用awk,因为awk是取列专业户


wc:统计行号

        -l:显示文件行数

例如: 过滤出/etc/passwd以nologin结尾的内容,并统计有多少行

1.先筛选出目标的行

2.然后进行统计

[root@oldboyedu ~]# grep "nologin$" /etc/passwd | wc -l

18

#扩展统计文件行号的方法

[root@oldboyedu ~]# cat -n /etc/services | tail -1

[root@oldboyedu ~]# grep -n ".*" /etc/services | tail -1

通常在题目中的意思:

grep过滤 匹配

awk取值

sed替换

sort uniq统计(排序|去重)

最后编辑于
©著作权归作者所有,转载或内容合作请联系作者
  • 序言:七十年代末,一起剥皮案震惊了整个滨河市,随后出现的几起案子,更是在滨河造成了极大的恐慌,老刑警刘岩,带你破解...
    沈念sama阅读 212,332评论 6 493
  • 序言:滨河连续发生了三起死亡事件,死亡现场离奇诡异,居然都是意外死亡,警方通过查阅死者的电脑和手机,发现死者居然都...
    沈念sama阅读 90,508评论 3 385
  • 文/潘晓璐 我一进店门,熙熙楼的掌柜王于贵愁眉苦脸地迎上来,“玉大人,你说我怎么就摊上这事。” “怎么了?”我有些...
    开封第一讲书人阅读 157,812评论 0 348
  • 文/不坏的土叔 我叫张陵,是天一观的道长。 经常有香客问我,道长,这世上最难降的妖魔是什么? 我笑而不...
    开封第一讲书人阅读 56,607评论 1 284
  • 正文 为了忘掉前任,我火速办了婚礼,结果婚礼上,老公的妹妹穿的比我还像新娘。我一直安慰自己,他们只是感情好,可当我...
    茶点故事阅读 65,728评论 6 386
  • 文/花漫 我一把揭开白布。 她就那样静静地躺着,像睡着了一般。 火红的嫁衣衬着肌肤如雪。 梳的纹丝不乱的头发上,一...
    开封第一讲书人阅读 49,919评论 1 290
  • 那天,我揣着相机与录音,去河边找鬼。 笑死,一个胖子当着我的面吹牛,可吹牛的内容都是我干的。 我是一名探鬼主播,决...
    沈念sama阅读 39,071评论 3 410
  • 文/苍兰香墨 我猛地睁开眼,长吁一口气:“原来是场噩梦啊……” “哼!你这毒妇竟也来了?” 一声冷哼从身侧响起,我...
    开封第一讲书人阅读 37,802评论 0 268
  • 序言:老挝万荣一对情侣失踪,失踪者是张志新(化名)和其女友刘颖,没想到半个月后,有当地人在树林里发现了一具尸体,经...
    沈念sama阅读 44,256评论 1 303
  • 正文 独居荒郊野岭守林人离奇死亡,尸身上长有42处带血的脓包…… 初始之章·张勋 以下内容为张勋视角 年9月15日...
    茶点故事阅读 36,576评论 2 327
  • 正文 我和宋清朗相恋三年,在试婚纱的时候发现自己被绿了。 大学时的朋友给我发了我未婚夫和他白月光在一起吃饭的照片。...
    茶点故事阅读 38,712评论 1 341
  • 序言:一个原本活蹦乱跳的男人离奇死亡,死状恐怖,灵堂内的尸体忽然破棺而出,到底是诈尸还是另有隐情,我是刑警宁泽,带...
    沈念sama阅读 34,389评论 4 332
  • 正文 年R本政府宣布,位于F岛的核电站,受9级特大地震影响,放射性物质发生泄漏。R本人自食恶果不足惜,却给世界环境...
    茶点故事阅读 40,032评论 3 316
  • 文/蒙蒙 一、第九天 我趴在偏房一处隐蔽的房顶上张望。 院中可真热闹,春花似锦、人声如沸。这庄子的主人今日做“春日...
    开封第一讲书人阅读 30,798评论 0 21
  • 文/苍兰香墨 我抬头看了看天上的太阳。三九已至,却和暖如春,着一层夹袄步出监牢的瞬间,已是汗流浃背。 一阵脚步声响...
    开封第一讲书人阅读 32,026评论 1 266
  • 我被黑心中介骗来泰国打工, 没想到刚下飞机就差点儿被人妖公主榨干…… 1. 我叫王不留,地道东北人。 一个月前我还...
    沈念sama阅读 46,473评论 2 360
  • 正文 我出身青楼,却偏偏与公主长得像,于是被迫代替她去往敌国和亲。 传闻我的和亲对象是个残疾皇子,可洞房花烛夜当晚...
    茶点故事阅读 43,606评论 2 350