Skip to content

约 10 分钟阅读

MySQL 高可用与扩展 ​

买家支付后看到“订单不存在”,不一定是写入失败:请求可能刚写完主库,下一次查询却被分到尚未追平的副本。另一个更严重的场景是旧主只与监控失联,却仍接受部分应用写入;此时直接提升副本,会出现两个写入历史。

高可用需要一起解决数据复制、故障判定、写入隔离、入口切换和业务重试。增加副本能提供恢复候选和读取容量,但不会自动完成这些工作。本文以 MySQL 8.4、InnoDB 为基线;备份及误操作恢复见备份恢复,复制状态的长期采集见监控与运维。

先确定业务允许怎样恢复 ​

订单创建接口应明确:成功响应的订单能否丢失,故障后多久恢复受理,客户端超时后如何确认结果。RPO 描述允许损失的数据窗口,RTO 描述恢复服务的时间目标;它们是需要演练验证的业务目标,不是“开启复制”后自然获得的保证。

可用性也要明确观察入口。数据库端口可连接,但所有订单请求都超时,仍属于业务不可用。99.99% 按 365 天计算约对应全年 52.56 分钟不可用预算;是否计入计划维护、部分失败以及统计窗口,必须先约定。同机运行的多个容器可以练习复制,不能证明机器、电源、磁盘或可用区故障下的可用性。

故障复制能做什么仍需解决什么
主库进程或主机故障提供保存了部分或全部事务的候选副本旧主隔离、数据缺口、提升和入口切换
网络分区部分节点可能仍能服务谁拥有写权限,少数派是否停止写入
误删订单或错误批量更新通常会把错误继续复制隔离恢复、时间点回放、业务对账
副本追不上写入可观察积压并扩充合适资源慢事务、锁、I/O、应用并行度和读取降级
客户端提交后断线事务可能已经提交业务幂等键和结果查询,避免重复扣款

日志收到与数据可见是两个阶段 ​

异步复制时,主库提交不等待副本确认。副本接收线程拉取 binlog 并写入 relay log,应用线程再执行事务。因此,接收线程正常不等于应用正常,日志已落到副本也不等于查询已经能看见它。

主库提交、接收日志与副本应用的三个进度边界

假设订单 1001 在主库已经提交。副本可能连日志都没收到,也可能已收到但被前面的大事务或行锁阻塞,尚未应用 1001。Seconds_Behind_Source=0 不是对任意请求的追平证明;它有状态、计时和拓扑边界,不能替代针对目标事务的检查。

方案成功提交时等待什么适用边界
异步复制不等待副本确认写入延迟较低;切换可能丢失尚未传出的已提交事务
半同步复制启用且正常工作时,等待配置数量副本将事务日志接收并刷入 relay log;等待点可配置不代表副本已经应用;超时可退回异步,必须监控实际状态与降级
Group Replication组内事务排序、认证等协调依赖多数派及成员状态;读取可见性还受一致性级别和应用进度约束

MySQL 8.4 默认 binlog 格式为 ROW。不要把 MIXED 写成当前默认;8.4 中格式选择等旧配置还有弃用边界,应围绕当前版本维护配置。GTID 为事务提供跨日志文件的标识,便于自动定位,但不会自动发现故障、选主、解决冲突或保护旧主写入。

建立一个有边界的 GTID 复制练习 ​

以下配置用于两个全新、可丢弃的练习实例,不是在已有生产库直接开启 GTID 的迁移步骤。每个实例必须有独立数据目录和唯一 server_id、server_uuid;从备份初始化副本时,要保持数据快照与 GTID 历史一致。不能只改复制起点,让空副本跳过已有数据。

先按所用安装方式完成两个实例的初始化及管理账号创建,再配置复制。官方容器的首次初始化也需要写入系统表,不能在这一步就强制 super_read_only。初始化完成后,两台实例的配置入口是各自实际加载的 my.cnf 的 [mysqld] 段:

ini
[mysqld]
# 主库为 101,副本改为 102
server_id=101
log_bin=binlog
gtid_mode=ON
enforce_gtid_consistency=ON
log_replica_updates=ON
sync_binlog=1
innodb_flush_log_at_trx_commit=1

# 以下只放在副本配置中
# read_only=ON
# super_read_only=ON
# skip_replica_start=ON

副本持久化只读配置,避免重启后误开写入。super_read_only 限制普通客户端及有管理能力的客户端写入,但复制应用线程仍可执行日志;有足够权限的人也能关闭它,因此它不能代替网络隔离和账号治理。双 1 持久性配置仍依赖文件系统、存储和硬件正确兑现刷盘语义,不等于整套系统不会丢数据。

主库上创建只用于复制的账号,来源应限定为实际副本地址或受控网段。下面 192.0.2.12 是保留示例地址,密码由受控秘密配置替换,不能原样使用。8.4 的复制通道密码最多 32 个字符,应使用满足此限制的高熵随机值,而不是将超长密码直接填入通道:

sql
CREATE USER 'repl'@'192.0.2.12'
  IDENTIFIED BY '<替换为随机复制密码>' REQUIRE SSL;
GRANT REPLICATION SLAVE ON *.* TO 'repl'@'192.0.2.12';

REPLICATION SLAVE 是 8.4 中仍使用的权限标识。启用 TLS 后,还要给副本配置可信 CA,并让主库证书的身份与连接主机名匹配;只加密、不核验身份不足以证明连的是预期主库。

在副本配置复制通道;这是需替换地址、路径及凭据的配置模板。主库 DNS 与证书应由部署环境准备,CA 文件必须能被 mysqld 读取。执行前检查通道确实属于本次练习,已有通道不能直接覆盖:

sql
CHANGE REPLICATION SOURCE TO
  SOURCE_HOST='mysql-source.example.internal',
  SOURCE_PORT=3306,
  SOURCE_USER='repl',
  SOURCE_PASSWORD='<替换为随机复制密码>',
  SOURCE_AUTO_POSITION=1,
  SOURCE_SSL=1,
  SOURCE_SSL_CA='/etc/mysql/tls/ca.pem',
  SOURCE_SSL_VERIFY_SERVER_CERT=1;
START REPLICA;
SHOW REPLICA STATUS\G

检查 Replica_IO_Running、Replica_SQL_Running、Last_IO_Error 和 Last_SQL_Error。I/O 失败先查网络、证书、账号来源及认证;SQL 失败先保留错误、GTID 和冲突行证据,不通过“跳过一个事务”掩盖数据分叉。MySQL 8.4 使用 CHANGE REPLICATION SOURCE TO、START/STOP REPLICA,不再复制旧 CHANGE MASTER 配置。

主库创建订单并提交后,记录一个包含该订单的 GTID 集合:

sql
CREATE DATABASE ha_demo;
CREATE TABLE ha_demo.orders (
  id BIGINT UNSIGNED PRIMARY KEY,
  request_key VARCHAR(64) NOT NULL UNIQUE,
  amount DECIMAL(12,2) NOT NULL
) ENGINE=InnoDB;
INSERT INTO ha_demo.orders VALUES (1001, 'checkout-1001', 39.90);
SELECT @@GLOBAL.gtid_executed AS required_gtids;

把上一步实际返回的字符串放入副本的当前会话,先等待,再读取:

sql
SET @required_gtids='<替换为主库返回的完整GTID集合>';
SELECT WAIT_FOR_EXECUTED_GTID_SET(@required_gtids, 3) AS wait_result;
SELECT * FROM ha_demo.orders WHERE id=1001;

应用必须检查等待结果:0 表示集合已执行,1 表示超时,错误或 NULL 也不能按成功继续。超时后应按业务约定回主库或返回可重试结果,不能继续从同一滞后副本读并谎称满足写后读。等待和后续读取应固定到同一副本、同一连接;已有 Repeatable Read 快照也可能继续看到旧数据,应在合适的新事务中读取。

该练习捕获全局集合,可能包含其他会话事务,等待范围偏大。生产可在连接协议与驱动支持的条件下取得本次事务的 GTID;业务还需安全地携带、校验和限时等待。不能把“写后固定读主库 5 秒”当成副本已经追平的证明,也不能在另一个线程里清理原请求的 ThreadLocal 状态。

读写路由先服从事务与一致性 ​

订单创建、支付结果确认、库存校验和锁定读取通常需要主库,或经过明确的一致性等待。运营报表、历史检索等容许短暂陈旧的读取,可以使用符合延迟和健康条件的副本。读取范围、租户授权和事务连接不能在路由时丢失。

用 ^SELECT 正则把所有查询送到副本会误处理 SELECT ... FOR UPDATE、事务内查询、会话变量、临时表和写后读。路由必须理解事务和会话约束,或由应用明确标注允许陈旧的查询。同一事务固定连接,不能“写去主库、事务里的读去副本”。

ProxySQL、MySQL Router 等工具的职责和能力不同。Router 可配合 InnoDB Cluster 的元数据提供角色入口,但仍需部署自身冗余;ProxySQL 的查询规则、监控和事务保持也要按所用版本验证。TCP SELECT 1 只证明能查询,不证明节点拥有正确角色、复制已应用、仍在多数派或有能力承受流量。

切换必须先阻止双写 ​

计划维护可以先停止新写入、等待在途事务结束、记录最终 GTID,再确认候选已执行完整集合。故障切换时旧主可能无法提供最终位置,异步拓扑便不能证明“没有遗漏已提交订单”;此时应记录缺口判断与业务恢复决策,而不是用 Seconds_Behind_Source=0 代替证明。

主库切换前隔离旧主、核对候选并重新开放写入口的流程

  1. 冻结写入口并隔离旧主。 覆盖现有连接、直连任务、定时器和重试,不只修改 DNS。按环境使用实例断电、网络隔离或经过验证的租约与 fencing;只在监控侧删节点不构成隔离。
  2. 保留并比较候选历史。 检查所有可用副本的已执行及已接收集合、应用错误、过滤配置和异常本地写入。GTID 集合是偏序关系,不能按字符串大小或事务数量选择“最新”;候选各有独有事务时要先调查分叉。
  3. 完成可用日志的应用。 候选已收到但未应用的事务也要纳入判断,等待目标集合并检查冲突;缺少的源日志已经清除时,可能需要从可信备份重新初始化。
  4. 提升一个候选并切换入口。 旧主隔离已确认、候选数据验收通过后,才调整复制与只读状态。更新路由并处理连接池旧连接,恢复小范围流量后确认订单读写、幂等结果与错误率。
  5. 旧主按恢复节点重新接入。 先保持隔离,核对分叉和未复制事务,必要时从新主重新克隆/还原。禁止把旧主直接改为可写并自动抢回主角色。

这是一套决策顺序,不是可对任意集群执行的提升脚本。未确认旧主隔离、候选历史或数据缺口时,保留写入冻结并修复证据链;不能用 RESET BINARY LOGS AND GTIDS、盲改 GTID、跳过错误事务或重新 bootstrap 来“清掉报警”。

客户端在提交后失联时,重试需携带同一个 request_key,并查询原订单结果。唯一约束能防止同键重复插入,但完整幂等还要核对同键请求参数、结果状态和事务边界。不能生成一个新键后再次扣款。

Group Replication 与 InnoDB Cluster ​

Group Replication 提供组成员管理、事务排序与认证等机制,常见部署是三个成员的单主组,分布在合适的独立故障域。多数派用于维持组内决策;三个成员容忍一个成员失效,不等于在任意双机故障、跨区隔离和路由故障下仍可写。单主简化写冲突,通常是业务首先评估的模式。

InnoDB Cluster 将 Group Replication、MySQL Shell AdminAPI 与 Router 组合为管理和路由体系;InnoDB ReplicaSet 是异步复制的另一种管理方案,不能把二者写成同一种自动选主能力。多主也不会把单个热点订单变成可无限并行写入:事务可能认证冲突,业务仍要处理回滚、重试与唯一约束。

组内事务排好顺序,不代表任意成员在任意时刻都已应用完。MySQL 8.4 的默认 group_replication_consistency 是 BEFORE_ON_PRIMARY_FAILOVER,新主在切换后处理积压期间阻塞新事务,避免直接在尚未应用完的状态服务;这不等于所有副本读取都自动强一致。BEFORE、AFTER、BEFORE_AND_AFTER 会在不同位置增加等待,要按读写合同和延迟要求选用。

可用以下入口观察角色与积压;只在实际运行 Group Replication 的实例上解释成员结果,普通异步副本表为空不构成故障:

sql
SELECT MEMBER_ID, MEMBER_HOST, MEMBER_PORT, MEMBER_STATE, MEMBER_ROLE
FROM performance_schema.replication_group_members;

SELECT MEMBER_ID, COUNT_TRANSACTIONS_IN_QUEUE,
       COUNT_TRANSACTIONS_REMOTE_IN_APPLIER_QUEUE,
       COUNT_CONFLICTS_DETECTED
FROM performance_schema.replication_group_member_stats;

生产组应通过匹配版本的 Shell/AdminAPI 检查实例配置、TLS、恢复账号、数据一致性及路由;不把几行 bootstrap_group=ON 当成完整安装方法。多数派丢失后,需要确认哪些实例存活、谁有最完整历史并隔离其他分区,再按灾难恢复流程处理。错误地在两个分区重新引导,可能创建两个互不知情的写入组。

Galera 应按实际采用的 PXC 或 MariaDB Galera 发行版部署,不能当成任意原生 MySQL 都能安装的通用插件;写集认证、应用队列与因果读取也有各自边界。NDB Cluster 则把数据节点与 SQL 节点分开,存储引擎、数据模型和限制不同;SQL 节点还可能包含本地非 NDB 对象,不能笼统视为绝对无状态。这些方案不能混用配置和恢复命令。

扩容与高可用分别验证 ​

增加读副本主要扩充可分流的读取,不扩充单主写入容量;副本仍需承受完整复制写入。升级 CPU、内存或存储应针对瓶颈,不能用增大连接数替代排队治理,也不能为了跑分降低 sync_binlog 或刷盘配置后继续宣称原有恢复保证。

分片把不同订单放在不同写入节点,带来路由、跨片查询、事务和迁移成本。例如按买家分片能使“买家订单列表”落在单片,却使“全站十月销售额”需要跨片汇总;每个分片仍需自己的备份与高可用。简单 user_id % N 在 N 改变时会移动大量数据,不能直接加节点而省略迁移、双读/双写策略、对账和切流。ShardingSphere、Vitess 等应按实际版本和拓扑建立配置,不把旧 YAML 当作通用部署文件。

演练与验收 ​

在隔离环境先制造可观测的小故障:暂停副本应用线程,主库新增一笔订单,确认等待超时而读取降级;恢复应用后,目标 GTID 等待成功且订单可见。再演练主机失效、网络分区、候选追不上、路由进程故障,以及客户端在提交前后断线,分别记录数据缺口、冻结时长、重复请求和恢复步骤。

验收必须从业务入口完成。检查成功响应的订单是否仍存在、同一请求是否只产生一笔订单、旧主是否确实无法再写,以及重启后只读和路由配置是否保持。恢复时间要覆盖检测、隔离、应用积压、角色提升、连接池重连和业务对账;只量 START REPLICA 的耗时,无法证明系统达到 RTO。

别急,先让缓存热一下。