Linux运维day32-阶段二——远程同步

一.什么是备份?

就是给源文件 增加 一个 副本.

U盘

D  --> E

二.为什么要做备份?

1.数据重要?

2.防止误操作

3.能够快速恢复

三.能不能不做备份?

可以, 不重要的数据可以不用考虑?

四.备份使用什么方式?

全量备份,每次都是完全拷贝,效率低下

增量备份,每次仅拷贝发生变化的文件,效率高

五.备份使用的工具有哪些?

本地备份:  cp

远程备份:  scp  rsync    sz rz

六.rsync  远程同步工具

实现主机与主机之间的同步, 实现增量的同步.    linux\windows\mac

PS: 如果将rsync当一个服务来使用,则需要知道 rsync  是个  c/s架构

七.rsync 推和拉 两种方式

推和拉结合使用

八.rsync传输模式

1.本地传输    --->  cp

2.远程传输    --->  scp

3.守护进程    ---> 

#等价于cp命令

        Local:  rsync [OPTION...] SRC... [DEST]

命令  选项      源      目标

[root@backup ~]# rsync -avz anaconda-ks.cfg  /tmp/

远程传输

      Access via remote shell:

        上传    Push: rsync [OPTION...] SRC... [USER@]HOST:DEST

命令  选项      源  系统用户 主机IP 目标位置

1.我要将我本地的那个文件,推送至那台服务器的那个目录,使用的是什么用户

[root@backup ~]# rsync -avz ./backup_file root@172.16.1.31:/opt/

root@172.16.1.31's password: #输入31的root密码

下载    Pull: rsync [OPTION...] [USER@]HOST:SRC... [DEST]

  命令    选项    系统用户 主机IP 

2.我要下载那个主机的那个目录下的文件,使用的是什么系统用户.  然后下载到我本地的那个位置

[root@backup ~]# rsync -avz root@172.16.1.31:/opt/backup_file  ./file.txt

root@172.16.1.31's password:    #输入31的root密码

目录:  /etc/  /etc    区别?

#推送/etc目录下的所有文件

[root@backup ~]# rsync -avz /etc/ root@172.16.1.31:/opt

#推送/etc目录以及目录下的所有文件

[root@backup ~]# rsync -avz /etc root@172.16.1.31:/opt

Rsync借助SSH协议同步数据存在的缺陷    (  使用对端主机的用户名和密码  系统  )

1.使用系统用户(不安全)

2.使用普通用户(会导致权限不足情况)

问题:

1.rsync -avz /etc/ root@172.16.1.31:/opt          ---> 172.168.1.31

2.路径问题

3.普通用户权限

守护进程模式--->一直在后台持续的运行

      Access via rsync daemon:

        Pull: rsync [OPTION...] [USER@]HOST::SRC... [DEST]

        Push: rsync [OPTION...] SRC... [USER@]HOST::DEST


1.安装

[root@backup ~]# yum install rsync -y

2.配置  ( 改变程序运行轨迹  )

[root@backup ~]# cat /etc/rsyncd.conf

uid = rsync

gid = rsync

port = 873

fake super = yes

use chroot = no

max connections = 200

timeout = 600

ignore errors

read only = false

list = false

auth users = rsync_backup

secrets file = /etc/rsync.passwd

log file = /var/log/rsyncd.log

#####################################

[backup]

comment = welcome to oldboyedu backup!

path = /backup

3.根据配置创建一些初识环境:

3.1创建rsync用户    rsync程序需要rsync这个用户来运行

[root@backup ~]# groupadd rsync

[root@backup ~]# useradd -M -s /sbin/nologin rsync -g rsync

[root@backup ~]# id rsync

uid=1000(rsync) gid=1000(rsync) groups=1000(rsync)

3.2 虚拟用户    /etc/rsync.passwd      username:password

[root@backup ~]# echo "rsync_backup:123456" > /etc/rsync.passwd

[root@backup ~]# chmod 600 /etc/rsync.passwd

3.3 创建一个/backup目录

[root@backup ~]# mkdir /backup

[root@backup ~]# chown -R rsync.rsync /backup/

4.启动

[root@backup ~]# systemctl start rsyncd

[root@backup ~]# systemctl enable rsyncd

5.检测

[root@backup ~]# netstat -lntp | grep 873

tcp        0      0 0.0.0.0:873      0.0.0.0:*        LISTEN    8616/rsync         

6.使用

Push: rsync [OPTION...] SRC... [USER@]HOST::DEST

[root@nfs ~]# rsync -avz ./anaconda-ks.cfg  rsync_backup@172.16.1.41::backup

Pull: rsync [OPTION...] [USER@]HOST::SRC... [DEST]

[root@nfs ~]# rsync -avz rsync_backup@172.16.1.41::backup /opt

7.客户端每次都需要使用密码?

1.设定变量  RSYNC_PASSWORD  (后面写脚本的时候)

[root@nfs ~]# export RSYNC_PASSWORD=123456

[root@nfs ~]# rsync -avz rsync_backup@172.16.1.41::backup /opt

2.提前准备一个文件 (只有密码的文件),  然后使用 --password-file 指定位置

[root@nfs ~]# echo "123456" >  /etc/rsync.pass

[root@nfs ~]# chmod 600 /etc/rsync.pass

[root@nfs ~]# rsync -avz rsync_backup@172.16.1.41::backup /opt --password-file=/etc/rsync.pass

8.-avz 这些选项  怎么理解?

-a          #归档模式传输, 等于-tropgDl

-v          #详细模式输出, 打印速率, 文件数量等

-z          #传输时进行压缩以提高效率

-r          #递归传输目录及子目录,即目录下得所有目录都同样传输。

-t          #保持文件时间信息

-o          #保持文件属主信息

-p          #保持文件权限

-g          #保持文件属组信息

-l          #保留软连接

-D          #保持设备文件信息

-P          #显示同步的过程及传输时的进度等信息

-L          #保留软连接指向的目标文件

-e          #使用的信道协议,指定替代rsh的shell程序

--exclude=PATTERN  #指定排除不需要传输的文件模式

--exclude-from=file #文件名所在的目录文件

--bwlimit=100      #限速传输

--delete            #让目标目录和源目录数据保持一致

9. --delete  这个参数 (让目标目录和源目录数据保持一致)  危险?

#推:  源有什么,目标就有什么

[root@nfs ~]# rsync -avz /root/ rsync_backup@172.16.1.41::backup --delete

#拉: 目标主机有什么, 本地就有什么

[root@nfs ~]# rsync -avz rsync_backup@172.16.1.41::backup ./ --delete

10.--bwlimit 限速, 这个参数?  1000兆    125MB/s   

虚拟机最高的峰值  25MB/s    5MB/s    ---> 取决于实际的情况

单位=KB

[root@nfs ~]# rsync  -avzP --bwlimit=5120  ubuntu-18.04.1-desktop-amd64.iso  rsync_backup@172.16.1.41::backup

sending incremental file list

ubuntu-18.04.1-desktop-amd64.iso  159,186,944  8%    5.12MB/s    0:05:41

11.--exclude  这个参数  --exclude-from ?

[root@nfs ~]# rsync  -avzP --exclude-from=pc.txt  rsync://192.168.0.128/yum  ./

[root@nfs ~]# cat pc.txt

centos/

code/

docker-ce/

epel/

git/

java/

jenkins/

kubernetes/

mongodb/

mysql/

node/

non-supported/

php/

python/

redis/

sonarqube/

windowstools/

zabbix/

CentOS-7-x86_64-DVD-1810.iso

CentOS-Base.repo

docker-ce.repo

epel.repo

nginx.repo

php.repo

rsync_exclude.txt

zabbix.repo

各种源使用说明.txt

12.使用rsync同步学校内网yum源?

mysql/

nginx/

php/

------------------------------------------------------------------------------------

总结

------------------------------------------------------------------------------------

1.备份基本知识

1.什么是备份?

2.为什么要做备份?

3.能不能不做备份?

4.备份使用什么方式?

5.备份使用的工具有哪些?

2.rsync远程同步  -->备份

1.rsync 推 和 拉 两种方式 以及  使用场景

2.rsync 传输模式  (三种)

本地传输  --->  没意义  cp

远程传输  --->  需要借助ssh协议  (使用系统用户)

守护进程  --->  虚拟用户

3.rsync守护进程如何搭建

1.安装

2.配置

3.启动

4.测试    ( 服务端  是否安装成功 )

5.使用    ( 客户端  能否正常使用 )

4.rsync 选项:

-avz

-P

--delete

--bwlimit  ( 实际生产故障 )

--exclude    排除  --> 使用过程中的需求

©著作权归作者所有,转载或内容合作请联系作者
  • 序言:七十年代末,一起剥皮案震惊了整个滨河市,随后出现的几起案子,更是在滨河造成了极大的恐慌,老刑警刘岩,带你破解...
    沈念sama阅读 211,884评论 6 492
  • 序言:滨河连续发生了三起死亡事件,死亡现场离奇诡异,居然都是意外死亡,警方通过查阅死者的电脑和手机,发现死者居然都...
    沈念sama阅读 90,347评论 3 385
  • 文/潘晓璐 我一进店门,熙熙楼的掌柜王于贵愁眉苦脸地迎上来,“玉大人,你说我怎么就摊上这事。” “怎么了?”我有些...
    开封第一讲书人阅读 157,435评论 0 348
  • 文/不坏的土叔 我叫张陵,是天一观的道长。 经常有香客问我,道长,这世上最难降的妖魔是什么? 我笑而不...
    开封第一讲书人阅读 56,509评论 1 284
  • 正文 为了忘掉前任,我火速办了婚礼,结果婚礼上,老公的妹妹穿的比我还像新娘。我一直安慰自己,他们只是感情好,可当我...
    茶点故事阅读 65,611评论 6 386
  • 文/花漫 我一把揭开白布。 她就那样静静地躺着,像睡着了一般。 火红的嫁衣衬着肌肤如雪。 梳的纹丝不乱的头发上,一...
    开封第一讲书人阅读 49,837评论 1 290
  • 那天,我揣着相机与录音,去河边找鬼。 笑死,一个胖子当着我的面吹牛,可吹牛的内容都是我干的。 我是一名探鬼主播,决...
    沈念sama阅读 38,987评论 3 408
  • 文/苍兰香墨 我猛地睁开眼,长吁一口气:“原来是场噩梦啊……” “哼!你这毒妇竟也来了?” 一声冷哼从身侧响起,我...
    开封第一讲书人阅读 37,730评论 0 267
  • 序言:老挝万荣一对情侣失踪,失踪者是张志新(化名)和其女友刘颖,没想到半个月后,有当地人在树林里发现了一具尸体,经...
    沈念sama阅读 44,194评论 1 303
  • 正文 独居荒郊野岭守林人离奇死亡,尸身上长有42处带血的脓包…… 初始之章·张勋 以下内容为张勋视角 年9月15日...
    茶点故事阅读 36,525评论 2 327
  • 正文 我和宋清朗相恋三年,在试婚纱的时候发现自己被绿了。 大学时的朋友给我发了我未婚夫和他白月光在一起吃饭的照片。...
    茶点故事阅读 38,664评论 1 340
  • 序言:一个原本活蹦乱跳的男人离奇死亡,死状恐怖,灵堂内的尸体忽然破棺而出,到底是诈尸还是另有隐情,我是刑警宁泽,带...
    沈念sama阅读 34,334评论 4 330
  • 正文 年R本政府宣布,位于F岛的核电站,受9级特大地震影响,放射性物质发生泄漏。R本人自食恶果不足惜,却给世界环境...
    茶点故事阅读 39,944评论 3 313
  • 文/蒙蒙 一、第九天 我趴在偏房一处隐蔽的房顶上张望。 院中可真热闹,春花似锦、人声如沸。这庄子的主人今日做“春日...
    开封第一讲书人阅读 30,764评论 0 21
  • 文/苍兰香墨 我抬头看了看天上的太阳。三九已至,却和暖如春,着一层夹袄步出监牢的瞬间,已是汗流浃背。 一阵脚步声响...
    开封第一讲书人阅读 31,997评论 1 266
  • 我被黑心中介骗来泰国打工, 没想到刚下飞机就差点儿被人妖公主榨干…… 1. 我叫王不留,地道东北人。 一个月前我还...
    沈念sama阅读 46,389评论 2 360
  • 正文 我出身青楼,却偏偏与公主长得像,于是被迫代替她去往敌国和亲。 传闻我的和亲对象是个残疾皇子,可洞房花烛夜当晚...
    茶点故事阅读 43,554评论 2 349

推荐阅读更多精彩内容