批量清除128组节点db上面过期的binlog释放磁盘空间实现思路

2023年 4月 22日 53.0k 0

如果10台以内的db的话,自己手动ssh进去,clean就足以,但是上百台呢,就要写脚本了。大概思路:在 一台db跳转机上面, 写一个脚本,访问slave,远程获取正在复制的master上面的binlog位置

如果10台以内的db的话,自己手动ssh进去,clean就足以,但是上百台呢,就要写脚本了。大概思路:在 一台db跳转机上面, 写一个脚本,访问slave,远程获取正在复制的master上面的binlog位置, 然后再远程去purge master上面的binlog.1, 建立slave dbserver列表 slavelist; 一个slave一行。 2,远程获取slave db上面的binlog位置以及slave的master主机名(也许是ip地址) 3,拿到binlog位置以及master主机名,然后ssh远程清理掉master上面的binlog 4,shell for循环操作step 2以及step 3。 附带脚本1:clean_binlog.sh 复制代码 代码如下: #!/bin/bash # p1 the slave mysql db server db03=$1 echo $dbserver; ster_Log_File=`ssh $db03 " mysql -uxx -pxx --ssl-ca=/opt/mysql/ssl/ca-cert.pem --s sl-cert=/opt/mysql/ssl/server-cert.pem --ssl-key=/opt/mysql/ssl/server-key.pem -e \"show slave status\G;\" |grep -i master_Log_File "`; # echo ##### 获取binlog信息 log_file=`echo $ster_Log_File | awk '{print $2}'`; db01tmp=`ssh $db03 " mysql -uxx -pxx --ssl-ca=/opt/mysql/ssl/ca-cert.pem --s sl-cert=/opt/mysql/ssl/server-cert.pem --ssl-key=/opt/mysql/ssl/server-key.pem -e \"show slave status\G;\" |grep -i Master_Host "`; 复制代码 代码如下: # 获取master主机名或者ip地址 db01=`echo $db01tmp | awk '{print $2}'` # 开始清理binlog日志信息 复制代码 代码如下: ssh $db01 " mysql -uxxx -pxx --ssl-ca=/opt/mysql/ssl/ca-cert.pem --ssl-cert=/op t/mysql/ssl/server-cert.pem --ssl-key=/opt/mysql/ssl/server-key.pem -e \"purge master logs to '$log_file';\" " # check master上面的binlog信息 复制代码 代码如下: ssh $db01 " df -h /mysql/binlog "; 复制代码 代码如下: <STRONG><SPAN style="COLOR: #ff0000"></SPAN></STRONG>&nbsp;&nbsp; 附带批量for循环脚本2: for s in `cat slavelist`; do sh clean_binlog.sh $s; done 这个是比较粗略的方案,肯定有不足之处,我的128组是mm组合,所以这样操作是可以的,架构不同估计会有变动,这里还涉及到purge之前的binlog的备份等等(有专门的备份机以及备份脚本)。

相关文章

Oracle如何使用授予和撤销权限的语法和示例
Awesome Project: 探索 MatrixOrigin 云原生分布式数据库
下载丨66页PDF,云和恩墨技术通讯(2024年7月刊)
社区版oceanbase安装
Oracle 导出CSV工具-sqluldr2
ETL数据集成丨快速将MySQL数据迁移至Doris数据库

发布评论