FILE+POS 方式 GreatSQL 主从复制架构给主节点磁盘扩容

2024年 7月 12日 70.9k 0

FILE+POS 方式 GreatSQL 主从复制架构给主节点磁盘扩容

一、前提

在一套非常老的系统上,有一套GreatSQL主从集群(1主1从),主从复制采用的是FILE+POS方式复制,磁盘使用紧张需要扩容,只能在该台机器上添加更大的磁盘,将原数据盘替换,也没有其他的机器资源替换。这套系统没有VIP,没有高可用切换工具,业务读写直连主节点,从节点可供读,允许有一定的延迟,全程磁盘扩容需要手动操作,以下方案步骤是模拟最快的方式去进行磁盘扩容。

二、整体思路是

在主节点机器上挂载一块新磁盘,在新磁盘上搭建一个新的从节点,旧从节点的主变为新从节点,最后将主节点与新从节点准备好配置文件后,关闭主节点,将新从节点使用新的配置文件重启,端口号为旧主port,新主实例顶替旧主成功。

三、模拟环境

主从架构

db01:master,172.17.135.81:3306

db02:slave02,172.17.134.225:3306

原主从db01 master复制数据到db02 slave02,现在在db01上搭建新的从节点slave01,并将slave01提升为新的主节点master02

db01:IP为172.17.135.81

master :port 3306

slave01:port 3307

db02:IP为172.17.134.225

slave02:port 3306

四、以下操作为模拟切换流程

1).在db01上master 数据放在磁盘 /data/

使用xtrabackup工具备份并搭建db01 slave01 数据放在磁盘/data2/上

2).改变db02 slave02 数据源为 db01 slave01(即db02 slave02 从db01-slave01同步数据),后期切换数据库

操作过程

01.停掉db02 slave02 复制线程

先停slave02目的是,slave02获取执行的binlog比db01 slave01上的binlog少,方便后续db02 slave02 追数据到db01 slave01 指定的位点

FILE+POS 方式 GreatSQL 主从复制架构给主节点磁盘扩容-1

02.观察db02 slave02(一定要小于04步骤的位置)

greatsql> show slave status\G
Relay_Master_Log_File: mysql-bin.000002
Exec_Master_Log_Pos: 61781270

FILE+POS 方式 GreatSQL 主从复制架构给主节点磁盘扩容-2

03.停掉db01 slave01主从线程

观察主从复制情况,确认 db01 slave01 获取主节点位点比db02 slave02 大,然后停掉主从,方便方便获取db01 slave01上的binlog位置信息(show master status)

观察标记部分比db02 slave02大

FILE+POS 方式 GreatSQL 主从复制架构给主节点磁盘扩容-3

停止复制

FILE+POS 方式 GreatSQL 主从复制架构给主节点磁盘扩容-4

04.观察db01 slave01

greatsql> show slave status\G
Relay_Master_Log_File: mysql-bin.000002
Exec_Master_Log_Pos:73110158

FILE+POS 方式 GreatSQL 主从复制架构给主节点磁盘扩容-5

05.观察db01 slave01

与获取主节点过来的binlog位点信息与当前节点上binlog位点信息对应关系

greatsql> show master status;
File :mysql-bin.000003
Position : 48396034

FILE+POS 方式 GreatSQL 主从复制架构给主节点磁盘扩容-6

06.开启db01 slave01 主从线程

使db01 slave01 正常追数据

greatsql> start slave;

07.db02 slave02  执行 until 的位置 为(04步骤)得到的值

追binlog至指定位点,该位点对应着db01 slave01 节点上show master status获取的位点信息

greatsql> start slave until MASTER_LOG_FILE ='mysql-bin.000002',MASTER_LOG_POS =73110158;

FILE+POS 方式 GreatSQL 主从复制架构给主节点磁盘扩容-7

观察状态,是否到指定位点停止

greatsql> show slave status \G

FILE+POS 方式 GreatSQL 主从复制架构给主节点磁盘扩容-8

到指定位点停止后,停掉主从复制

greatsql> stop slave;

FILE+POS 方式 GreatSQL 主从复制架构给主节点磁盘扩容-9

08.db02 slave02 从db01 slave01获取数据源(即重新指定db02 slave02 主库信息)

根据04 、05 获取的主binlog位点与db01 slave01 binlog位点对应关系,将db02 slave02复制关系指定位从db01 slave01获取binlog数据,重启主从复制,并观察主从状态

在db02 slave02 重新指定复制关系

greatsql> reset slave all;

greatsql> CHANGE MASTER TO MASTER_HOST= '172.17.135.81',MASTER_USER='rpl', MASTER_PASSWORD='rpl123!',MASTER_PORT=3307,MASTER_LOG_FILE='mysql-bin.000003', MASTER_LOG_POS=48396034;

greatsql> start slave;

FILE+POS 方式 GreatSQL 主从复制架构给主节点磁盘扩容-10

观察复制状态,等待复制正常之后在进行下一步,避免数据丢失

greatsql> show slave status \G

FILE+POS 方式 GreatSQL 主从复制架构给主节点磁盘扩容-11

09.通知将业务停止,避免数据更新,观察全部节点是否处于同一binlog位点状态

在db01 master节点上观察

FILE+POS 方式 GreatSQL 主从复制架构给主节点磁盘扩容-12

观察db01 slave01 主从是否正常,且无延迟

greatsql> show slave status\G

FILE+POS 方式 GreatSQL 主从复制架构给主节点磁盘扩容-13

greatsql> show master status;

FILE+POS 方式 GreatSQL 主从复制架构给主节点磁盘扩容-14

观察 db02 slave02

FILE+POS 方式 GreatSQL 主从复制架构给主节点磁盘扩容-15

10.停止db02 slave 02

greatsql> stop slave;

11.在db02 slave 02观察

greatsql> show slave status\G
Relay_Master_Log_File: mysql-bin.000003
Exec_Master_Log_Pos: 114096916

12.先后正常关闭 db01 master,然后关闭db01 slave01

修改配置文件db01 slave01 端口号为3306

13.启动db01 slave01(不要启动db01 master)

登录db01 slave01 清除复制信息

greatsql> reset slave all;

14.重置db02 slave02主从复制信息,从新的主节点拉取数据

greatsql> CHANGE MASTER TO MASTER_HOST= '172.17.135.81',MASTER_USER='rpl', MASTER_PASSWORD='rpl123!',MASTER_PORT=3306,MASTER_LOG_FILE='mysql-bin.000003', MASTER_LOG_POS=114096916;

greatsql> show slave status\G

FILE+POS 方式 GreatSQL 主从复制架构给主节点磁盘扩容-16

15、通知业务重连,磁盘扩容完成

五、案例总结

本案例主要是针对非GTID复制、无自动切换、无VIP、无新机器、磁盘无法动态扩容的场景。

核心思想是找到对应的binlog位点信息,在重新指定主从信息,在重新指定主从信息之前,可以做准备工作,例如主节点上的新备主节点可以提前准备,配置文件可以提前准备,命令提前准备好,通过填补的方式将关键信息填到对应的命令中,尽量的去节省时间以及追数时间,促使业务宕机时间达到最短。

相关文章

Oracle如何使用授予和撤销权限的语法和示例
Awesome Project: 探索 MatrixOrigin 云原生分布式数据库
下载丨66页PDF,云和恩墨技术通讯(2024年7月刊)
社区版oceanbase安装
Oracle 导出CSV工具-sqluldr2
ETL数据集成丨快速将MySQL数据迁移至Doris数据库

发布评论