8. MySQL 数据库如何实现 XA 规范

MySQL 有哪些一致性日志

如果 MySQL 数据库断电了,未提交的事务怎么办?
依靠日志
MySQL InnoDB 引擎中和一致性相关的有:重做日志(redo log)、回滚日志(undo log)、二进制日志(binlog)

  • redo 日志:每当有操作执行前,在数据真正更改前,会先把相关操作写入 redo 日志。
    当断电,或发生一些意外,导致后续任务无法完成时,待系统恢复后,可以继续完成这些更改
  • undo 日志:也叫撤销日志,记录事务开始前数据的状态,当一些更改在执行一半时
    发生意外而无法完成,可以根据撤销日志恢复到更改之前的状态
    举例:事务 T1 更新数据 X ,对 X 执行 Update 操作,从 10 更新到 20 对应的 Redo 日志为<T1,X,20> Undo 日志为 <T1,X,10>
  • binlog 日志是 MySQL server 层维护的一种二进制日志,是 MySQL 最重要的日志之一
    它记录了所有的DDL 和 DML 语句,除了数据查询语句 select, show 等,还包含语句所执行的消耗的时间

binlog 的主要目的是复制和恢复
用来记录对 MySQL 数据更新或潜在发生更新的 SQL 语句,并以事务日志的形式保存在磁盘中
binlog 主要应用在 MySQL 的主从复制过程中,MySQL 集群在 Master 端开启 binlog
Master 把它的二进制日志传递给 slaves 节点
再从节点回放来达到 master-slave 数据保存一致

# 查看 binlog 文件内容
show binlog events;

# 查看指定 binlog 文件的内容
show binlog events in 'MySQL-bin.000001';

# 查看正在写入的binlog 文件
show master status \G;

# 获取 binlog 文件列表
show binary logs;

XA 规范是如何定义的

20230731110920.jpg
事务协调者(Transaction Manager)

XA 事务是基于两阶段提交协议的
需要有一个协调者,来保证所有的事务参与者完成了准备工作,也就是 2PC 的第一阶段
如果事务协调者收到所有参与者都准备好的消息
会通知所有的事务都可以提交,也就是 2PC 的第二阶段
在分布式系统中,两台机器理论上无法达到一致的状态,需要引入一个单点进行协调
协调者,也就是 事务管理器控制着全局事务,管理事务生命周期,并协调资源

资源管理器(Resource Manager)

负责控制和管理实际资源,比如数据库或 JMS 队列
目前,主流数据库都是提供了对 XA 的支持
在 JMS 规范中,即 Java 消息服务(Java Message Service) 中
也基于 XA 定义了对事务的支持

XA 事务的执行流程

根据 2PC 的规范,XA 将一次事务分割成了两个阶段,即 Prepare 和 Commit 阶段

  • Prepare 阶段,TM 向所有 RM 发送 prepare 指令,RM 接受到指令后
    执行数据修改和日志记录等操作,然后返回可以提交或者不提交的消息给 TM
    如果事务协调者 TM 收到所有参与者都准备好的消息,会通知所有的事务提交,然后进入第二阶段
  • Commit 阶段,TM 接受到所有 RM 的 prepare 结果
    如果所有 RM 返回是不可提交或者超时,那么向所有 RM 发送 Rollback 命令
    如果所有 RM 都返回可以提交,那么向所有 RM 发送 Commit 命令,完成一次事务操作

MySQL 如何实现 XA 规范

MySQL 中 XA 事务有两种情况,内部 XA 和 外部 XA
其区别是事务发生在 MySQL 服务器单机上,还是发生在多个外部节点间上

内部 XA

在 MySQL 的 InnoDB 存储引擎中,开启 binlog 的情况下
MySQL 会同时维护 binlog 日志和 InnoDB 的 redo log,为了保证这两个日志的一致性
MySQL 使用了 XA 事务,由于有在 MySQL 单机上工作,所以被称为内部 XA
内部 XA 事务由 binlog 作为协调者,在事务提交时,则需要将提交信息写入二进制日志
binlog 的参与者是 MySQL 本身

外部XA

外部 XA 是典型的分布式事务,MySQL 支持 XA START/END/PREPARE/Commit 这些SQL语句
MySQL 外部 XA 主要应用在数据库代理层,实现对 MySQL 数据库的分布式事务支持
例如:开源的数据库中间层,比如淘宝的 TDDL,阿里巴巴 B2B 的 Cobar 等
外部 XA 一般是针对跨多 MySQL 实例的分布式事务,需要应用层作为协调者
比如写业务代码,在代码中决定提交还是回滚,并且在崩溃时进行恢复

Binlog 中的 Xid

binlog 有多种数据类型

  • statement 格式,记录为基本语句,包含 Commit
  • row 格式,记录为基于行
  • mixed 格式,日志记录使用混合格式

binlog 会添加一个 XID_EVENT 作为事务的结束,该事件记录了事务的 ID 也就是 Xid
在 MySQL 进行崩溃恢复时根据 binlog 中提交的情况来决定如何恢复

Binlog 同步过程

20230731142337.jpg

当有事务提交时:

  • 第一步,InnoDB 进入 Prepare 阶段,并且 write / sync redo log,写 redo log
    将事务的 XID 写入到 redo 日志中,binlog 不作任何操作
  • 第二步,进行 write / sync Binlog,写 binlog 日志,也会把 XID 写入到 Binlog
  • 第三步,调佣 InnoDB 引擎的 Commit 完成事务的提交,将 Commit 信息写入到 redo 日志中

如果是在 第一步和 第二步失败,则整个事务回滚
如果是在第三步失败,则 MySQL 在重启后会检查 XID 是否已经提交
若没有提交,事务需要重新执行,就会在存储引擎中再执行一次提交操作
保障 redo log 和 binlog 数据的一致性,防止数据丢失

在实际执行中,牵扯到操作系统缓存 Buffer 何时同步到文件系统中
MySQL 支持用户自定义在 Commit 时如何将 log buffer 中的日志刷到 log file 中
通过变量 innodb_flush_log_at_trx_Commit 的值来决定
在 log buffer 中内容称为脏日志

©著作权归作者所有,转载或内容合作请联系作者
  • 序言:七十年代末,一起剥皮案震惊了整个滨河市,随后出现的几起案子,更是在滨河造成了极大的恐慌,老刑警刘岩,带你破解...
    沈念sama阅读 198,030评论 5 464
  • 序言:滨河连续发生了三起死亡事件,死亡现场离奇诡异,居然都是意外死亡,警方通过查阅死者的电脑和手机,发现死者居然都...
    沈念sama阅读 83,198评论 2 375
  • 文/潘晓璐 我一进店门,熙熙楼的掌柜王于贵愁眉苦脸地迎上来,“玉大人,你说我怎么就摊上这事。” “怎么了?”我有些...
    开封第一讲书人阅读 144,995评论 0 327
  • 文/不坏的土叔 我叫张陵,是天一观的道长。 经常有香客问我,道长,这世上最难降的妖魔是什么? 我笑而不...
    开封第一讲书人阅读 52,973评论 1 268
  • 正文 为了忘掉前任,我火速办了婚礼,结果婚礼上,老公的妹妹穿的比我还像新娘。我一直安慰自己,他们只是感情好,可当我...
    茶点故事阅读 61,869评论 5 359
  • 文/花漫 我一把揭开白布。 她就那样静静地躺着,像睡着了一般。 火红的嫁衣衬着肌肤如雪。 梳的纹丝不乱的头发上,一...
    开封第一讲书人阅读 46,766评论 1 275
  • 那天,我揣着相机与录音,去河边找鬼。 笑死,一个胖子当着我的面吹牛,可吹牛的内容都是我干的。 我是一名探鬼主播,决...
    沈念sama阅读 36,967评论 3 388
  • 文/苍兰香墨 我猛地睁开眼,长吁一口气:“原来是场噩梦啊……” “哼!你这毒妇竟也来了?” 一声冷哼从身侧响起,我...
    开封第一讲书人阅读 35,599评论 0 254
  • 序言:老挝万荣一对情侣失踪,失踪者是张志新(化名)和其女友刘颖,没想到半个月后,有当地人在树林里发现了一具尸体,经...
    沈念sama阅读 39,886评论 1 293
  • 正文 独居荒郊野岭守林人离奇死亡,尸身上长有42处带血的脓包…… 初始之章·张勋 以下内容为张勋视角 年9月15日...
    茶点故事阅读 34,901评论 2 314
  • 正文 我和宋清朗相恋三年,在试婚纱的时候发现自己被绿了。 大学时的朋友给我发了我未婚夫和他白月光在一起吃饭的照片。...
    茶点故事阅读 36,728评论 1 328
  • 序言:一个原本活蹦乱跳的男人离奇死亡,死状恐怖,灵堂内的尸体忽然破棺而出,到底是诈尸还是另有隐情,我是刑警宁泽,带...
    沈念sama阅读 32,504评论 3 316
  • 正文 年R本政府宣布,位于F岛的核电站,受9级特大地震影响,放射性物质发生泄漏。R本人自食恶果不足惜,却给世界环境...
    茶点故事阅读 37,967评论 3 302
  • 文/蒙蒙 一、第九天 我趴在偏房一处隐蔽的房顶上张望。 院中可真热闹,春花似锦、人声如沸。这庄子的主人今日做“春日...
    开封第一讲书人阅读 29,128评论 0 19
  • 文/苍兰香墨 我抬头看了看天上的太阳。三九已至,却和暖如春,着一层夹袄步出监牢的瞬间,已是汗流浃背。 一阵脚步声响...
    开封第一讲书人阅读 30,445评论 1 255
  • 我被黑心中介骗来泰国打工, 没想到刚下飞机就差点儿被人妖公主榨干…… 1. 我叫王不留,地道东北人。 一个月前我还...
    沈念sama阅读 42,018评论 2 343
  • 正文 我出身青楼,却偏偏与公主长得像,于是被迫代替她去往敌国和亲。 传闻我的和亲对象是个残疾皇子,可洞房花烛夜当晚...
    茶点故事阅读 41,224评论 2 339

推荐阅读更多精彩内容