从库

[MYSQL] select导致主从延迟增大 (原因:autocommit=off)

导读 之前也有遇到从库select导致从库延迟的, 那是因为从库的select数据量太大, 锁还没释放. 本次又遇到个类似的案例, 也是select导致从库延迟太大. 现象 客户环…

怎样通过拷贝数据文件的方式创建MySQL从库?

作者简介马听,清华大学所在国家学生,0家世界500强创始人,福布斯2024富豪榜阅读者。有时候,我们有一套MySQL主从,希望再创建一个从库。这种场景,一般建议是通过Xtrabac…

MySQL 半同步机制解读

MySQL的主从架构是其最成熟的高可用架构之一。早期的实现主要是基于异步复制机制,而后来逐渐发展出了半同步复制机制。这两种机制的主要区别体现在数据同步的方式和主从服务器之间的交互上…

MySQL复制从库延迟优化思路

1、什么是MySQL复制延迟?本质是MySQL从库的relay log回放跟不上主库生成速度,产生延迟2、主从延迟常见的原因有哪些?1、大事务,从库回放时间较长,导致主从延迟2、主…

MySQL复制从库延迟原因深入分析

背景介绍近来一套业务系统,从库一直处于延迟状态,无法追上主库,导致业务风险较大。从资源上看,从库的CPU、IO、网络使用率较低,不存在服务器压力过高导致回放慢的情况;从库开启了并行…

MySQL5.7小版本升级遇到 [Note] Bad handshake错误

适用范围    Linux X86平台下的 MySQL 5.7 社区版 小版本升级(5.7.34 -> 5.7.44)。 问题概述    升级后有部分连接无法连接成功,MyS…

从库延迟案例分析

从库延迟案例分析背景介绍近来一套业务系统,从库一直处于延迟状态,无法追上主库,导致业务风险较大。从资源上看,从库的CPU、IO、网络使用率较低,不存在服务器压力过高导致回放慢的情况…

从库延迟案例分析,你学到了什么

背景介绍近来一套业务系统,从库一直处于延迟状态,无法追上主库,导致业务风险较大。从资源上看,从库的CPU、IO、网络使用率较低,不存在服务器压力过高导致回放慢的情况;从库开启了并行…

如何避免MySQL主从延迟带来的读写问题?

在MYSQL 部署架构选型上,许多公司都会用到主从读写分离的架构,如下是一个一主一从的架构,主库master负责写入,从库slave进行读取。图片但是既然是读写分离,必然会面临这样…

如何避免MYSQL主从延迟带来的读写问题?

在MYSQL 部署架构选型上,许多公司都会用到主从读写分离的架构,如下是一个一主一从的架构,主库master负责写入,从库slave进行读取。 但是既然是读写分离,必然会面临这样一…

MySQL主从复制原理与搭建实践

导读 本文将从 MySQL 主从复制的应用目的和场景出发,探讨其实际意义及必要性。之后,介绍 MySQL 主从复制的实现原理及其各个复制模式。最后,通过 Docker 容器化的方式…

新炬避坑指南连载(十)

Gbase DDL recover影响到其他的用户insertElasticSearch数据量大,内存使用率高,集群处于不稳定运行状态ElasticSearch GA05版本安装中…

开工第一天,我删库了

开工第一天,我删库了 过了一个忙碌的春节,春节8天接了4个活儿,都是古董级别的数据库,印象最深的是Oracle 8i迁移到PG 15,然后我遇到了这次的删库事件,一个MySQL 5…

MySQL 从库复制状态一直为 “ Reading event from the relay log”

1.故障现象mysql 5.7的从库最近延迟一直在上升,查看状态发现exec_master_log_pos 一直卡在154794029不动,slave_sql_running_st…

MySQL主从数据不一致竟然不报错?

阅读需知Retrieved_Gtid_Set 从库已经接收到主库的事务编号(从库的 IO 线程已经接收到了)。Executed_Gtid_Set 已经执行的事务编号(从库的执行 S…

MySQL:级联从库延迟数据库的延迟计算问题

本文主要讨论的还是5.7,8.0没有实际测试,这里简单记录。一、问题说明 最近在处理一个主从问题的时候,发现一个比较奇怪的现象,这个主从是级联的也就是A->B->C库,…

关于数据库系统的 Republication Lags

Republication Lags ( 复制延迟)是指在主从数据库复制环境中,从库数据同步落后于主库的时间间隔。如果复制延迟比较严重,会对系统有不好的影响,如:1. 数据不一致从…

故障解析丨导入字符串NULL导致主从报错

1.背景概述目前需要搭建一个从库,由于单表数据量较大,时间比较有限,考虑到导入导出的时间,并且GreatSQL支持并行load data的功能,能够加速数据的导入,因此决定使用 s…

mysql 从库重置同步

一 问题 巡检发现mysql5.7的主从库有一个从库与主库断开同步,应该是版本升级时主从不同步,原从库变为主了,而原主库变为从库了,且数据比现在主库多。 2023-11-14T15…

Redis 的主库挂了,如何不间断服务?

我们了解到在主从库集群模式下,如果从库发生故障,客户端可以继续向主库或其他从库发送请求,执行相应的操作。然而,当主库发生故障时,会直接影响从库的同步,因为此时从库失去了可用的主库进…

测试MySQL8从库的relay_log_recovery参数

版本: 8.0.34 relay_log_recovery – > OFF 表: 从状态: 主日志: 关闭relay_log_recovery 实验 停止SQL slave …

mysql 在从库执行变更操作导致主从gtid号不一致

如果是在主从做了大量的变更操作,建议重做主从。少部分的变更可以尝试使用此方法使gtid恢复一致。生产环境操作需谨慎,可以使用show slave status命令查看当前数据库是否…

主从数据不一致竟然不报错?

一个线上数据丢失故障案例,引出了在 GTID 模式下 AUTO POSITION MODE 的必要性。 作者:孙绪宗 新浪微博 DBA 团队工程师,主要负责 MySQL、Postg…

怎么判断mysql连接到从库

什么是从库?从库是MySQL主从复制的一部分,它是MySQL集群中负责重复主库的数据更新的从属服务器。从库的目的是提高系统的可用性、负载均衡以及防止数据丢失。判断mysql连接从库…

深入理解Redis主从架构

repl_backlog_buffer:它是为了从库断开之后,如何找到主从差异数据而设计的环形缓冲区,从而避免全量复制带来的性能开销。如果从库断开时间太久,repl_backlog…

MySQL主从复制主库binlog dump线程源码分析

在之前的文章《mysql主从复制io线程源码分析》,我们分析了MySQL从库的io线程工作的主要过程,大致回顾一下,如下: 连接主库 发送COM_REGISTER_SLAVE命令注…

服务器时钟差异对MySQL复制延迟的影响

本文通过一组测试,来看一下MySQL主从库服务器时钟的差异对MySQL复制延迟的影响。 一、测试环境 操作系统:CentOS 7.3,4核,16G MySQL: 5.7.19 1主…

MySQL 参数解析 slave_preserve_commit_order

slave_preserve_commit_order 参数在多线程复制环境下,能够保证从库回放relay log事务的顺序与这些事务在relay log中的顺序完全一致,也就是与…

MySQL8.0 没有主键不单只从库复制延迟,还可能会导致复制报错 …

背景昨天我研读了源码大佬八怪的新文章《MySQL:主从 HASH SCAN 算法可能导致从库数据错误》,我将其内容概括如下:如果主从复制的行搜索算法设置为使用 HASH SCAN,…

MySQL:主从复制从库GTID大量空洞的问题

作者简介:高鹏,笔名八怪。《深入理解MySQL主从原理》图书作者,同时运营个人公众号“MySQL学习”,持续分享遇到的有趣case以及代码解析!一、问题来源这是今天的一个问题,是朋…

死磕数据库系列(十二):MySQL 分库分表(何时分?怎么分?)

刚开始我们只用单机数据库就够了,随后面对越来越多的请求,我们将数据库的写操作和读操作进行分离, 使用多个从库副本(Slaver Replication)负责读,使用主库(Maste…

性价比高的mysql高可用集群

MySQL高可用集群的必要性MySQL数据库是应用广泛的关系型数据库,在大多数Web应用中都扮演着核心角色。但是,如果单个MySQL节点失效,将会造成严重的数据丢失和应用中断,对业…

数据库读写分离和分库分表详解

读写分离 读写分离主要是为了将对数据库的读写操作分散到不同的数据库节点上。 读写分离 一般情况下,我们都会选择一主多从,也就是一台主数据库负责写,其他的从数据库负责读。主库和从库之…

MySQL:我的从库竟是我自己!?

本文将通过复制场景下的异常分析,介绍手工搭建MySQL主从复制时需要注意的关键细节。 作者:秦福朗 爱可生 DBA 团队成员,负责项目日常问题处理及公司平台问题排查。热爱互联网,会…

mysql主从复制——从库扩展

前言 运维工程师在工作中一定会使用到mysql数据库的主从复制,那么肯定会有扩展从库的需求,比如数据库当前吞吐量比较大或者需要单独加一台从库做专门的数据分析。那么生产环境如何添加m…

MySQL 分库分表(何时分?怎么分?)

开始我们只用单机数据库就够了,随后面对越来越多的请求,我们将数据库的写操作和读操作进行分离, 使用多个从库副本(Slaver Replication)负责读,使用主库(Master…

MySQL从库维护经验分享

前言: MySQL 主从架构应该是最常用的一组架构了。从库会实时同步主库传输来的数据,一般从库可以作为备用节点或作查询使用。其实不只是主库需要多关注,从库有时候也要经常维护 前言:…

mysql 如何动态修改复制过滤器

MySQL动态修改复制过滤器 说说今天遇到的问题吧,今天在处理一个业务方的需求,比较变态,我大概描述一下: 1、线上的阿里云rds上面有个游戏的日志库,里面的表都是日表的形式, M…

MySQL主从复制延迟原因以及解决方案

来源:公众号「神谕的暗影长廊」 在异步或半同步的复制结构中,从库出现延迟是一件十分正常的事。 虽出现延迟正常,但是否需要关注,则一般是由业务来评估。 如:从库上有需要 来源:公众号…

The MySQL server is running with the readonly option so i

正在开会,同事电话反映开发库不能写入了,错误信息如下: 1209 - The MySQL server is running with the--read-only option …