备注:测试数据库版本为MySQL 8.0
这个blog我们来聊聊MySQL 的逻辑备份工具mysqldump
一.mysqldump参数介绍
参数名 | 描述 | 启用 | 弃用 |
---|---|---|---|
--add-drop-database | 在create database语句前带上drop database语句 | ||
--add-drop-table | 在create table语句前带上 drop table语句 | ||
--add-drop-trigger | 在create trigger语句前带上 drop trigger语句 | ||
--add-locks | 导出的时候,每个表执行LOCK TABLES and UNLOCK TABLES语句 | ||
--all-databases | 导出所有的数据库 | ||
--allow-keywords | 允许列名为关键字 | ||
--apply-slave-statements | 在 STOP SLAVE和START SLAVE之间加上 CHANGE MASTER语句 | ||
--bind-address | 用指定的网络接口连接mysql | ||
--character-sets-dir | 字符集文件的目录 | ||
--column-statistics | 写ANALYZE TABLE 语句收集统计信息、直方图 | ||
--comments | 导出的时候带上comment注释语句 | ||
--compact | 导出更少的输出信息(用于调试)。去掉注释和头尾等结构。 | ||
--compatible | 导出的数据将和其它数据库或旧版本的MySQL 相兼容。 值可以为ansi、mysql323、mysql40、 postgresql、oracle、mssql、db2、maxdb、no_key_options、no_tables_options、no_field_options等,要使用几个 值,用逗号将它们隔开。它并不保证能完全兼容,而是尽量兼容。 |
||
--complete-insert | 使用完整的insert语句(包含列名称)。这么做能提高插入效率,但是可能会受到max_allowed_packet参数的影响而导致插入失败。 | ||
--compress | 在客户端和服务器之间启用压缩传递所有信息 | 8.0.18 | |
--compression-algorithms | 允许连接mysql服务器的时候使用压缩算法 | 8.0.18 | |
--create-options | 在CREATE TABLE语句中包括所有MySQL特性选项。(默认为打开状态) | ||
--databases | 导出几个数据库。参数后面所有名字参量都被看作数据库名。 | ||
--debug | 写debugging日志 | ||
--debug-check | 检查内存和打开文件使用说明并退出 | ||
--debug-info | 输出调试信息并退出 | ||
--default-auth | 需要使用的身份验证插件 | ||
--default-character-set | 指定默认的字符集 | ||
--defaults-extra-file | 除了通常的选项文件外,还读取指定的选项文件 | ||
--defaults-file | 只读取选项文件 | ||
--defaults-group-suffix | 选项组后缀值 | ||
--delete-master-logs | master备份后删除日志. 这个参数将自动激活--master-data | ||
--disable-keys | 对于每个表,用 /*!40000 ALTER TABLE tbl_name DISABLE KEYS /; 和 /!40000 ALTER TABLE tbl_name ENABLE KEYS */; 语句引用INSERT语句。 这样可以更快地导入dump出来的文件,因为它是在插入所有行后创建索引的。 该选项只适合MyISAM表,默认为打开状态。 |
||
--dump-date | 如--comments指定,则dump加上"Dump completed on" date 注释 | ||
--dump-slave | 该选项将导致主的binlog位置和文件名追加到导出数据的文件中。 设置为1时,将会以CHANGE MASTER命令输出到数据文件; 设置为2时,在命令前增加说明信息。该选项将会打开--lock-all-tables,除非--single-transaction被指定。 该选项会自动关闭--lock-tables选项。默认值为0。 |
||
--enable-cleartext-plugin | 开启cleartext认证插件 | ||
--events | 导出数据库的事件 | ||
--extended-insert | 使用 multiple-row INSERT 语法 | ||
--fields-enclosed-by | 输出文件中的各个字段用给定字符包裹。 与--tab选项一起使用,不能用于--databases和--all-databases选项 |
||
--fields-escaped-by | 输出文件中的各个字段忽略给定字符。 与--tab选项一起使用,不能用于--databases和--all-databases选项 |
||
--fields-optionally-enclosed-by | 输出文件中的各个字段用给定字符选择性包裹。 与--tab选项一起使用,不能用于--databases和--all-databases选项 |
||
--fields-terminated-by | 输出文件中的各个字段用给定字符包裹。 与--tab选项一起使用,不能用于--databases和--all-databases选项 |
||
--flush-logs | 开始导出之前刷新日志 | ||
--flush-privileges | 在导出mysql数据库之后,发出一条FLUSH PRIVILEGES 语句。 | ||
--force | 即便dump报错依旧继续导出 | ||
--get-server-public-key | 从服务器请求 RSA public key | ||
--help | 显示帮助信息并退出 | ||
--hex-blob | 用十六进制记数法导出binary列 | ||
--host | mysql所在服务器信息 | ||
--ignore-error | 忽略指定的报错 | ||
--ignore-table | 不导出指定的表 | ||
--include-master-host-port | 在--dump-slave产生的'CHANGE MASTER TO..' 语句中增加'MASTER_HOST=<host>,MASTER_PORT=<port>' |
||
--insert-ignore | 在插入行时使用INSERT IGNORE语句. | ||
--lines-terminated-by | 输出文件的每行用给定字符串划分。 与--tab选项一起使用,不能用于--databases和--all-databases选项。 |
||
--lock-all-tables | 提交请求锁定所有数据库中的所有表,以保证数据的一致性 使用flush table with read lock来获取全局的一致性备份 |
||
--lock-tables | 导出前锁定表 | ||
--log-error | 将警告和错误输出到指定文件 | ||
--login-path | 从.mylogin.cnf读取 login path | ||
--master-data | 该选项将binlog的位置和文件名追加到输出文件中。 如果为1,将会输出CHANGE MASTER 命令; 如果为2,输出的CHANGE MASTER命令前添加注释信息。 该选项将打开--lock-all-tables 选项,除非--single-transaction也被指定(在这种情况下,全局读锁在开始导出时获得很短的时间; 其他内容参考下面的--single-transaction选项)。 该选项自动关闭--lock-tables选项。 |
||
--max-allowed-packet | 服务器发送和接受的最大包长度。 | ||
--net-buffer-length | TCP/IP和socket连接的缓存大小。 | ||
--network-timeout | 增加网络超时选项,允许大表的导出 | ||
--no-autocommit | 使用autocommit/commit 语句包裹表。 | ||
--no-create-db | 导出文件中不包含CREATE DATABASE语句 | ||
--no-create-info | 导出文件中不包含 CREATE TABLE语句 | ||
--no-data | 只导出数据库表结构,不导出数据 | ||
--no-defaults | 不读取任何选项文件 | ||
--no-set-names | 同 --skip-set-charset 选项 | ||
--no-tablespaces | 导出文件中不包含 CREATE LOGFILE GROUP 和 CREATE TABLESPACE 语句 | ||
--opt | --add-drop-table --add-locks --create-options --disable-keys --extended-insert --lock-tables --quick --set-charset的缩写 |
||
--order-by-primary | 导出的数据根据表的主键或唯一索引进行排序 | ||
--password | 登陆mysql服务器用户的密码 | ||
--pipe | 使用命名管道连接mysql(windows独有) | ||
--plugin-dir | 插件安装的目录 | ||
--port | TCP/IP 连接的端口 | ||
--print-defaults | 打印出默认的options | ||
--protocol | 使用的连接协议,包括:tcp, socket, pipe, memory. | ||
--quick | 不缓冲查询,直接导出到标准输出。默认为打开状态,使用--skip-quick取消该选项。 | ||
--quote-names | 使用(`)引起表和列名。默认为打开状态,使用--skip-quote-names取消该选项。 | ||
--replace | 使用REPLACE INTO 取代INSERT INTO. | ||
--result-file | 直接输出到指定文件中。 | ||
--routines | 导出存储过程以及自定义函数。 | ||
--server-public-key-path | RSA public key 所在的目录及文件 | ||
--set-charset | 增加SET NAMES default_character_set 输出 | ||
--set-gtid-purged | 是否增加 SET @@GLOBAL.GTID_PURGED 到输出 | ||
--shared-memory-base-name | 共享内存连接使用的共享内存名称(windows独有) | ||
--show-create-skip-secondary-engine | CREATE TABLE语句中排除第二种存储引擎 | 8.0.18 | |
--single-transaction | 该选项在导出数据之前提交一个BEGIN SQL语句, BEGIN 不会阻塞任何应用程序且能保证导出时数据库的一致性状态。 它只适用于多版本存储引擎,仅InnoDB。 本选项和--lock-tables 选项是互斥的,因为LOCK TABLES 会使任何挂起的事务隐含提交。 要想导出大表的话,应结合使用--quick 选项。 |
||
--skip-add-drop-table | 输出的create table语句前不包含drop table语句 | ||
--skip-add-locks | 不加锁 | ||
--skip-comments | 不加备注文件到输出 | ||
--skip-compact | 输出的文件不压缩 | ||
--skip-disable-keys | 不禁用 keys | ||
--skip-extended-insert | 关闭extended-insert 默认导出:INSERT INTO t3 VALUES (1,'aaaaaaaa'),(2,'bbbbbbbb'),(3,'cccccccccc');开启后 INSERT INTO t3 VALUES (1,'aaaaaaaa');INSERT INTO t3 VALUES (2,'bbbbbbbb'); INSERT INTO t3 VALUES (3,'cccccccccc');除非必要,不然不要开启,文件过大,执行性能也差 |
||
--skip-opt | 关闭--opt选项 | ||
--skip-quick | 不从服务器一次检索表的行 | ||
--skip-quote-names | 不引用标识符 | ||
--skip-set-charset | 不加 SET NAMES语句 | ||
--skip-triggers | 不导出触发器 | ||
--skip-tz-utc | 关闭 tz-utc | ||
--socket | socket文件 | ||
--ssl-ca | ssl安全相关 | ||
--ssl-capath | ssl安全相关 | ||
--ssl-cert | ssl安全相关 | ||
--ssl-cipher | ssl安全相关 | ||
--ssl-crl | ssl安全相关 | ||
--ssl-crlpath | ssl安全相关 | ||
--ssl-fips-mode | ssl安全相关 | ||
--ssl-key | ssl安全相关 | ||
--ssl-mode | ssl安全相关 | ||
--tab | 为每个表在给定路径创建tab分割的文本文件。要求mysqldump在mysql服务器上 | ||
--tables | 覆盖--databases (-B)参数,指定需要导出的表名 | ||
--tls-ciphersuites | 允许用于加密连接的TLSv1.3密码套件 | 8.0.16 | |
--tls-version | 允许加密连接的TLS协议 | ||
--triggers | 导出触发器。该选项默认启用,用--skip-triggers禁用它。 | ||
--tz-utc | 在输出文件中增加 SET TIME_ZONE='+00:00' | ||
--user | 登陆mysql服务器的用户名 | ||
--verbose | 输出多种平台信息。 | ||
--version | 输出版本信息并退出 | ||
--where | 只转储给定的WHERE条件选择的记录。 请注意如果条件包含命令解释符专用空格或字符,一定要将条件引用起来。 |
||
--xml | 生成XML输出 | ||
--zstd-compression-level | 使用zstd压缩的到服务器的连接的压缩级别 | 8.0.18 |
二.一些mysqldump案例整理
下面整理一些常用的mysqldump案例
-- 备份所有数据库到单个文件中
mysqldump -uroot -p -hhost --all-databases > dump.sql
-- 备份单个数据库,备份数据库 db_name
mysqldump -uroot -p -hhost db_name > dump.sql
-- 备份数据库下的单个表,备份 数据库 db_name下的tab_name表
mysqldump -uroot -p -hhost db_name tab_name> dump.sql
-- 备份表的元数据,不导出数据
mysqldump -uroot -p -hhost --no-data db_name tab_name> dump.sql
-- 备份表的数据,不包含建表语句
mysqldump -uroot -p -hhost --no-create-info db_name tab_name> dump.sql
-- 备份多张表,备份 示例数据库 db_name下的tab1、tab2表
mysqldump -uroot -p -hhost db_name tab1 tab2> dump.sql
-- 带where条件的备份,导出id小于100的数据
mysqldump -uroot -p -hhost db_name tab_name --where="id < 100" > dump.sql
-- 剔除几张表进行备份数据库下其它的表
mysqldump -uroot -p -hhost db_name --ignore-table db_name.tab1 --ignore-table db_name.tab2> dump.sql
-- 通过--result-file选项来指定输出文件,避免windows上发生换行符转换
mysqldump -uroot -p -hhost db_name --result-file=dump.sql
注意
对于InnoDB备份,应该增加 --single-transaction选项,这会使用InnoDB的MVCC特性在单个时间点创建一个一致性的备份,而不需要lock tables锁定所有的表。
如果增加--master--data选项,备份还会包括在备份时服务器的二进制日志的位置,这对基于时间的恢复和设置复制非常有帮助。然后也要知道,获得日志位置时需要使用flush tabls with read lock冻结服务器。
三.逻辑备份文件格式化
mysqldump导出的格式如下:
-- MySQL dump 10.13 Distrib 8.0.20, for Linux (x86_64)
--
-- Host: localhost Database: test
-- ------------------------------------------------------
-- Server version 8.0.20
/*!40101 SET @OLD_CHARACTER_SET_CLIENT=@@CHARACTER_SET_CLIENT */;
/*!40101 SET @OLD_CHARACTER_SET_RESULTS=@@CHARACTER_SET_RESULTS */;
/*!40101 SET @OLD_COLLATION_CONNECTION=@@COLLATION_CONNECTION */;
/*!50503 SET NAMES utf8mb4 */;
/*!40103 SET @OLD_TIME_ZONE=@@TIME_ZONE */;
/*!40103 SET TIME_ZONE='+00:00' */;
/*!40014 SET @OLD_UNIQUE_CHECKS=@@UNIQUE_CHECKS, UNIQUE_CHECKS=0 */;
/*!40014 SET @OLD_FOREIGN_KEY_CHECKS=@@FOREIGN_KEY_CHECKS, FOREIGN_KEY_CHECKS=0 */;
/*!40101 SET @OLD_SQL_MODE=@@SQL_MODE, SQL_MODE='NO_AUTO_VALUE_ON_ZERO' */;
/*!40111 SET @OLD_SQL_NOTES=@@SQL_NOTES, SQL_NOTES=0 */;
--
-- Table structure for table `t1`
--
DROP TABLE IF EXISTS `t1`;
/*!40101 SET @saved_cs_client = @@character_set_client */;
/*!50503 SET character_set_client = utf8mb4 */;
CREATE TABLE `t1` (
`id` int DEFAULT NULL,
`name` varchar(100) DEFAULT NULL
) ENGINE=InnoDB DEFAULT CHARSET=utf8mb4 COLLATE=utf8mb4_0900_ai_ci;
/*!40101 SET character_set_client = @saved_cs_client */;
--
-- Dumping data for table `t1`
--
LOCK TABLES `t1` WRITE;
/*!40000 ALTER TABLE `t1` DISABLE KEYS */;
INSERT INTO `t1` VALUES (1,'a'),(2,'b'),(3,'c');
/*!40000 ALTER TABLE `t1` ENABLE KEYS */;
UNLOCK TABLES;
--
-- Table structure for table `t2`
--
DROP TABLE IF EXISTS `t2`;
/*!40101 SET @saved_cs_client = @@character_set_client */;
/*!50503 SET character_set_client = utf8mb4 */;
CREATE TABLE `t2` (
`id` int DEFAULT NULL,
`name` varchar(100) DEFAULT NULL
) ENGINE=InnoDB DEFAULT CHARSET=utf8mb4 COLLATE=utf8mb4_0900_ai_ci;
/*!40101 SET character_set_client = @saved_cs_client */;
--
-- Dumping data for table `t2`
--
LOCK TABLES `t2` WRITE;
/*!40000 ALTER TABLE `t2` DISABLE KEYS */;
INSERT INTO `t2` VALUES (1,'abc'),(2,'def'),(3,'ghi');
/*!40000 ALTER TABLE `t2` ENABLE KEYS */;
UNLOCK TABLES;
/*!40103 SET TIME_ZONE=@OLD_TIME_ZONE */;
/*!40101 SET SQL_MODE=@OLD_SQL_MODE */;
/*!40014 SET FOREIGN_KEY_CHECKS=@OLD_FOREIGN_KEY_CHECKS */;
/*!40014 SET UNIQUE_CHECKS=@OLD_UNIQUE_CHECKS */;
/*!40101 SET CHARACTER_SET_CLIENT=@OLD_CHARACTER_SET_CLIENT */;
/*!40101 SET CHARACTER_SET_RESULTS=@OLD_CHARACTER_SET_RESULTS */;
/*!40101 SET COLLATION_CONNECTION=@OLD_COLLATION_CONNECTION */;
/*!40111 SET SQL_NOTES=@OLD_SQL_NOTES */;
-- Dump completed on 2020-07-02 5:44:25
格式化输出:
[mysql@****** tmp]$ egrep -v "#|\*|--|^$" dump1.sql
DROP TABLE IF EXISTS `t1`;
CREATE TABLE `t1` (
`id` int DEFAULT NULL,
`name` varchar(100) DEFAULT NULL
) ENGINE=InnoDB DEFAULT CHARSET=utf8mb4 COLLATE=utf8mb4_0900_ai_ci;
LOCK TABLES `t1` WRITE;
INSERT INTO `t1` VALUES (1,'a'),(2,'b'),(3,'c');
UNLOCK TABLES;
DROP TABLE IF EXISTS `t2`;
CREATE TABLE `t2` (
`id` int DEFAULT NULL,
`name` varchar(100) DEFAULT NULL
) ENGINE=InnoDB DEFAULT CHARSET=utf8mb4 COLLATE=utf8mb4_0900_ai_ci;
LOCK TABLES `t2` WRITE;
INSERT INTO `t2` VALUES (1,'abc'),(2,'def'),(3,'ghi');
UNLOCK TABLES;
参考文档:
1.https://dev.mysql.com/doc/refman/8.0/en/mysqldump.html
2.https://www.cnblogs.com/qq78292959/p/3637135.html