当前位置: 首页 > news >正文

详解Mysql的 Binlog、UndoLog 和 RedoLog

        MySQL 中有三种重要的日志机制:Binlog(二进制日志)、UndoLog(回滚日志)和 RedoLog(重做日志)。它们在数据库系统中扮演着不同的角色,共同保障了数据库的可靠性、一致性和可恢复性。

1. Binlog (Binary Log,二进制日志)

基本概念

        Binlog 是 MySQL Server 层实现的二进制日志,记录了对数据库执行的所有更改操作(DDL 和 DML),但不包括 SELECT 和 SHOW 这类不修改数据的操作。

主要特点

  • 服务层实现:与存储引擎无关,所有引擎都会产生 binlog。

  • 追加写入:以追加方式写入文件,不会覆盖旧日志。

  • 三种格式

    • STATEMENT:记录 SQL 语句本身。

    • ROW:记录行的变更(默认格式)。

    • MIXED:混合模式,根据情况自动选择。

主要用途 

  • 主从复制:从库通过重放主库的 binlog 实现数据同步。

  • 数据恢复:可以通过 binlog 进行时间点恢复。

  • 数据审计:可以通过分析 binlog 追踪数据库变更。

工作流程

  1. 事务执行过程中,将变更记录到 binlog cache。

  2. 事务提交时,将 binlog cache 写入 binlog 文件。

  3. 根据 sync_binlog 参数决定何时刷盘(0-系统决定,1-每次提交,N-每N次提交)。

2. UndoLog (回滚日志)

基本概念

        UndoLog 是 InnoDB 存储引擎特有的日志,用于记录事务发生前的数据状态,主要用于事务回滚和 MVCC 实现。

主要特点

  • 逻辑日志:记录与执行操作相反的操作(如 INSERT 对应 DELETE)。

  • 存储在系统表空间:默认存储在 ibdata1 文件中。

  • 多版本控制:支持 MVCC(多版本并发控制)。

主要用途

  • 事务回滚:事务失败时回滚到之前的状态。

  • MVCC 实现:提供数据的多版本读视图。

  • 崩溃恢复:帮助恢复未完成的事务。

工作流程

  1. 事务开始前,记录修改前的数据到 undo log。

  2. 如果事务需要回滚,根据 undo log 恢复原始数据。

  3. 事务提交后,undo log 不会立即删除,可能被其他事务的 MVCC 读使用。

3. RedoLog (重做日志)

基本概念

        RedoLog 是 InnoDB 特有的物理日志,记录的是"在某个数据页上做了什么修改",用于崩溃恢复。

主要特点

  • 物理日志:记录的是页的物理修改。

  • 循环写入:固定大小,循环使用。

  • WAL 技术:Write-Ahead Logging,先写日志再写磁盘。

  • 两阶段提交:与 binlog 配合实现数据一致性。

主要用途

  • 崩溃恢复:确保已提交事务的持久性。

  • 提高性能:将随机 IO 变为顺序 IO。

  • 保证持久性:即使系统崩溃也能恢复已提交的数据。

工作流程

  1. 事务修改数据时,先修改内存中的缓冲池(Buffer Pool)。

  2. 将修改记录写入 redo log buffer。

  3. 根据 innodb_flush_log_at_trx_commit 参数决定刷盘时机:

    • 0:每秒刷盘一次。

    • 1:每次事务提交都刷盘(默认)。

    • 2:每次提交只写入文件系统缓存。

4. 三者的协同工作

在事务提交时,这三种日志的协作流程(以默认设置为例):

  1. 事务开始。

  2. 记录 undo log(用于回滚)。

  3. 执行 SQL,修改 Buffer Pool 中的数据页。

  4. 记录 redo log(准备状态)。

  5. 记录 binlog。

  6. 提交事务,redo log 状态改为 commit。

  7. 后台线程将脏页刷盘。

这个过程采用了"两阶段提交"来保证 redo log 和 binlog 的一致性。

5. 对比总结

特性BinlogUndoLogRedoLog
层级MySQL Server 层InnoDB 引擎层InnoDB 引擎层
类型逻辑日志逻辑日志物理日志
内容SQL 或行变更反向操作页的物理修改
用途复制、恢复、审计事务回滚、MVCC崩溃恢复
生命周期可配置保留时间事务结束后可能保留循环覆盖使用
持久化时机事务提交时事务开始前事务过程中

6. 实际应用中的注意事项

  • 性能调优

    • sync_binlog 和 innodb_flush_log_at_trx_commit 参数影响性能和数据安全性。

    • 适当增大 redo log 大小可以减少刷盘频率。

  • 备份恢复

    • 结合 binlog 可以实现时间点恢复。

    • 全量备份+binlog 是常见的备份策略。

  • 主从复制

    • 基于 binlog 的主从复制有延迟问题。

    • 半同步复制可以部分解决数据一致性问题。

相关文章:

  • 交换机的连接方式堆叠和级联
  • Python 脚本执行命令的深度探索:方法、示例与最佳实践
  • day34 python深度学习训练优化实践:CPU vs GPU
  • 南门岗,15号楼俩电梯一片监控掉线,
  • python学习打卡day34
  • 纺线机与PLC通讯故障?ETHERCAT/CANopen网关秒解协议难题
  • 高项公式英文解析记忆
  • Open CASCADE学习|非线性方程组求解技术详解
  • 【Linux cmd】查找进程信息
  • 无人机开启未来配送新篇章
  • 解构赋值与剩余参数:语法特性背后的思考
  • 制作一款打飞机游戏55:扩散
  • SAP在金属行业的数字化转型:无锡哲讯科技的智能解决方案
  • 二维空间几何图形​​处理库.GEOS几何库.
  • 农业机械化、电气化和自动化知网英文普刊:1天录用,2周见刊发表!
  • PyTorch中TensorBoardX模块与torch.utils.tensorboard模块的对比分析
  • 文章记单词 | 第109篇(六级)
  • GESP编程等级认证C++三级8-字符串1
  • 使用clickhouse的ReplacingMergeTree引擎表做活跃玩家信息表
  • RxJS 高阶映射操作符详解:map、mergeMap 和 switchMap
  • 做旅游的网站 优帮云/长沙网站优化对策
  • 宁波网络推广的公司报价/宁波seo费用
  • 建设网站需要多大域名空间/线上营销活动主要有哪些
  • 做网站表格/谷歌推广怎么样
  • 软件开发的阶段/济南seo顾问
  • 昆明做百度网站电话号码/seo和sem的区别