目录 1. 关于 binlog 日志文件 2. 从 trx_cache 读出来 2.1 只从内存 buffer 读取 2.2 从临时文件读取 3. 写入 binlog 日志文件 4. 总结 正文 1. 关于 binlog 日志文件 binlog 日志文件包含两部分： 内存 buffer，这是 MySQL 自己为 binlog 日志文件提供的内存缓冲区，称为 IO_CACHE，和操作系统为文件提供的

目录 1. 关于 binlog 日志文件 2. 从 trx_cache 读出来 2.1 只从内存 buffer 读取 2.2 从临时文件读取 3. 写入 binlog 日志文件 4. 总结 正文 1. 关于 binlog 日志文件 binlog 日志文件包含两部分： 内存 buffer，这是 MySQL 自己为 binlog 日志文件提供的内存缓冲区，称为 IO_CACHE，和操作系统为文件提供的

MYSQL 一个事务在提交的时候能够保证binlog和redo log是同时提交的，并且能在宕机恢复后保持binlog 和redo log的一致性。 先来看看什么是redo log 和binlog，以及为什么要保持它们的一致性。 什么是redo log，binlog redo log是innodb引擎层产生的日志, MYSQL从磁盘读取数据的单位是一页，当修改页中某条数据时，该行所在的数据页就变成

MYSQL 一个事务在提交的时候能够保证binlog和redo log是同时提交的，并且能在宕机恢复后保持binlog 和redo log的一致性。 先来看看什么是redo log 和binlog，以及为什么要保持它们的一致性。 什么是redo log，binlog redo log是innodb引擎层产生的日志, MYSQL从磁盘读取数据的单位是一页，当修改页中某条数据时，该行所在的数据页就变成

数据库作为存储数据的组件，数据的一致性一定是要保证的前提，今天给出两个场景来分析数据不一致的原因。 binlog同步模式导致主从不一致 在MYSQL 中主库向从库同步数据是利用binlog记录修改操作，然后将binlog传递给从库进行复制，binlog的格式有3种， row 在对update，delete，insert语句进行记录时会进行修改的行数据进行记录。row格式的坏处在于比较占用空间，比如

binlog爆炸，空间不足，怎么办 某天、运维同事在线紧急求助，因客户MySQL数据库服务器空间使用率100%，原因是binlog日志爆炸了，才几天，日志占用空间达到了几百GB。 用了几秒钟思考：空间已经不足，数据库都登录不了了，只能从物理文件上直接操作删除，于是让同事如下操作： 手动rm清理 rm -rf mysql-bin.00040*; vim mysql-bin.log.index 清除掉

1、序 大事务想必大家都遇到过，既然要对大事务进行拆分，第一步就是要找到它。那么如何通过binlog来定位到大事务呢？ 首先，可通过binlog文件的大小来判断是否存在大事务，当一个binlog文件快被写完时，突然出现大事务，会突破 max_binlog_size 的大小继续写入。 官方文档中是这样描述的： A transaction is written in one chunk to the

一、日志相关 -- 查看MySQL是否开启了binlog日志 show variables like 'log_bin';   -- 查看binlog日志的格式 show variables like 'binlog_format';   -- 查看所有日志 show binlog events;   -- 查看最新的日志 show master status;   -- 查询指定的binlog日

1序 大事务想必大家都遇到过，既然要对大事务进行拆分，第一步就是要找到它。那么如何通过 binlog 来定位到大事务呢？ 首先，可通过 binlog 文件的大小来判断是否存在大事务，当一个 binlog 文件快被写完时，突然出现大事务，会突破 max_binlog_size 的大小继续写入。 官方文档[1] 中是这样描述的： A transaction is written in one chun

前言 本篇文章介绍了MySQL数据库中误删库后，使用逻辑备份完全恢复方法的一种方法。 此方法的一个前提条件是数据库打开了binlog，在生产环境中强烈建议打开binlog。这相当于数据库的归档，虽然占用了一定的存储资源，但是他带来的收益是巨大的。当数据库被误操作删除了之后，全量备份只能恢复到备份前的时间点，备份之后新增的数据是没办法回复的，要想恢复这部分数据，那就要借助binlog。 事件的时间节

1. 二阶段提交 二阶段提交，顾名思义，包含两个阶段，它们是： prepare 阶段。 commit 阶段。 我们只考虑 SQL 语句操作 InnoDB 表的场景，对于用户事务，是否使用二阶段提交，取决于是否开启了 binlog。 因为 MySQL 把 binlog 也看作一个存储引擎，开启 binlog，SQL 语句改变（插入、更新、删除）InnoDB 表的数据，这个 SQL 语句执行过程中，就

目录 1. 二阶段提交 2. prepare 阶段 2.1 binlog prepare 2.2 InnoDB prepare 3. 总结 正文 1. 二阶段提交 二阶段提交，顾名思义，包含两个阶段，它们是： prepare 阶段。 commit 阶段。 我们只考虑 SQL 语句操作 InnoDB 表的场景，对于用户事务，是否使用二阶段提交，取决于是否开启了 binlog。 因为 MySQL 把

导读 上一篇文章介绍了 并发导入, 但还有一种需求是 只恢复特定的某张表. 比如这张表有坏块啊, 或者其它啥需求, 反正就是要恢复这张表, 但是又没单独备份这张表. 只有 一个定时全备(mysqldump) 那要怎么恢复呢??? 分析 上一篇介绍的 mysqldump拆分脚本https://www.modb.pro/doc/125805 还支持 仅拆分出来指定的表, 然后我们再从binlog中解析

二阶段提交的 prepare 阶段，binlog 和 InnoDB 各自会有哪些动作？ 作者：操盛春，爱可生技术专家，公众号『一树一溪』作者，专注于研究 MySQL 和 OceanBase 源码。 爱可生开源社区出品，原创内容未经授权不得随意使用，转载请联系小编并注明来源。 本文基于 MySQL 8.0.32 源码，存储引擎为 InnoDB。 1. 二阶段提交 二阶段提交，顾名思义，包含两个阶段，

MySQL是一个广泛使用的开源关系型数据库管理系统，它提供了许多强大的功能，如事务、存储过程、触发器、视图、全文索引等。但是，MySQL也有一些不足之处，比如数据的安全性和可靠性。如果数据库发生故障或损坏，如何恢复数据?如果数据库需要进行主从复制或读写分离，如何保证数据的一致性?这些问题都需要借助一个特殊的机制来解决，那就是binlog。 1. binlog的主要用途 binlog是MySQL的一

事务提交时，才会把产生的 binlog 一次性写入 binlog 日志文件。事务执行过程中，会一直产生 binlog，这些 binlog 会暂存到哪里？ 作者：操盛春，爱可生技术专家，公众号『一树一溪』作者，专注于研究 MySQL 和 OceanBase 源码。 爱可生开源社区出品，原创内容未经授权不得随意使用，转载请联系小编并注明来源。 本文基于 MySQL 8.0.32 源码，存储引擎为 In

作者：操盛春，爱可生技术专家，公众号『一树一溪』作者，专注于研究 MySQL 和 OceanBase 源码。爱可生开源社区出品，原创内容未经授权不得随意使用，转载请联系小编并注明来源。 本文基于 MySQL 8.0.32 源码，存储引擎为 InnoDB。 目录 1. 准备工作 2. 解析 binlog 3. binlog cache 4. 产生 binlog 5. 怎么写入 trx_cache？

我们最近在研究灾备，也就是说系统挂了，怎么办，库被删了怎么办。之前有被挟持过，问我们要0.000几个比特币，差不多几千还是几万块钱来着。不过是测试环境，推倒重建就好了。这次让出一个方案，说是生产库要是被删了，要如何处理。 我们的数据库是MySql8.0的，也就基于这个版本进行尝试 准备 首先，库被删了之后，有以下方案可以恢复丢失的数据： 备份恢复： 如果你有备份数据库，可以通过数据库备份进行恢复。

作者： 马文斌 时间： 2024-1-29 标签： mysql 磁盘空间 爆满 binlog 背景 近期数据库空间一直告警，平时这套数据库集群是不会有磁盘空间告警的，难道是最近业务量猛增了吗？咱们来瞧瞧到底怎么回事？ 清理binlog 先清理一些历史的binlog，这样可以马上释放磁盘空间 PURGE BINARY LOGS TO 'mysql-bin.059306'; 统计大表 test_pla

1 binlog_row_event_max_size     这个参数来自于8.014后续的版本，在mysql 逐步使用新架构后，一些值从不可调，变为可调，这个值就是其中之一，   这个值是负责在MYSQL BINLOG 中的一行最大的尺寸，实际上如果超过这个尺寸也是可以被接受的，默认这个值为8192BYTES  2 log_bin  在MySQL中是否开启binlog是通过log_bin来进行