三库副本集群:HA、连接心智与读写分离别混谈

三库副本集群:HA、连接心智与读写分离别混谈

Hello,我是小兔大白糖。 「上了集群」常被当成一件事办完。联调时才发现:刚写下的单读不到、failover 后连接池还握着旧主、同事把「有从库」当成「核心读该拆」。

写成这篇,给要做 MySQL / PostgreSQL / MongoDB 副本与高可用选型调研 的初中级后端同学:钉的是业界常见连接心智与边界,不是某云规格书,也不是某项目怎么改 DataSource 的工单。

说明:文中路径、数字与伪流程均为教学脱敏 / 示意。产品名与参数只写公开文档可核对的概念;不编造「某厂官方内部就是这样」。同站已有 Mongo 读偏好深文——本文只给三库总览,细节见文末导航。

估计阅读时间:11 分钟


目录


为什么现在要关心

硬规则先说清三条:HA ≠ 读扩展 ≠ 写扩展;三库「应用怎么连」差很多;读写分离不是默认最佳实践。

现场里「支持集群」这句话,常常混了四类不同目标:

你以为在办实际在动的旋钮
「主挂了还能写」自动选主 / failover / 多数派
「机器坏了少丢数」多副本同步或异步复制
「读太多拆出去」副本可读 + 路由策略
「单主写打满」分片 / 分库分表——与副本 HA 正交

更要命的是连接侧:Mongo 副本集常见「一个 URI + 驱动发现拓扑」;MySQL / PostgreSQL 常见「主地址 +(可选)从地址或代理」。把三者当成同义词,才会在联调里撞上读己之写失败、池子握旧主。


心智模型:订房、柜台与高速公路

主比喻三条,各管一块,不要串用。

比喻对应什么解释得了解释不了
订房(HA)主挂了换一间还能入住「写入口能否恢复」读是否该打副本、写是否该水平扩展
柜台记账本 vs 复印本Primary / 主库 vs Secondary / 从库写落点、读可能滞后选主窗口——柜台暂时没人,复印本救不了写
高速公路分道(读扩展)只读流量旁路主被只读压满时的旁路减负慢查询 / 缺索引——拆道不治堵因

类比局限一句钉死:订房管调度与恢复;柜台本管写落点与陈旧度;分道管读压力。 三者都解释不了「客户端超时后那次写到底成功没有」——那是幂等与观测的问题。

HA、读扩展、写扩展三个正交目标示意图
HA、读扩展、写扩展三个正交目标示意图 · 点击查看 SVG 原图

问题空间:四个目标别揉成「上了集群」

先问「我要的是换主、少丢数、拆读,还是水平写」;答错题,后面配什么拓扑都像在治错病。

目标含义常见手段
HA(高可用)主挂了尽快恢复写自动选主、failover、多数派法定人数
冗余持久性降低单机毁损丢数多副本同步 / 异步复制
读扩展(可选)读分摊到副本副本可读 + 应用或代理路由
写扩展(正交)突破单主写天花板分片 / 分库分表 / Citus 等

边界再钉三句:

  • 有 Secondary / 从库 ≠ 核心读就该打过去。
  • 在线副本 ≠ 冷备份 / PITR(时间点恢复)。
  • HA 三节点 ≠ 水平写扩展。

云托管常把选主与备份封装掉,但复制延迟、读己之写、超时后写是否成功,仍是应用语义——托管替不了你在业务层做选择。


三套拓扑一眼

三者都能做 HA;读入口与写扩展入口别混进同一句话。

MySQLMongoDBPostgreSQL
复制主线binlog 主从;亦可 Group Replication / InnoDB ClusterReplica Set(oplog)流复制 + WAL
选主历史上常见 MHA / Orchestrator;现今多见云或 GR / InnoDB Cluster协议内选举社区核心发行版本身不自带完整自动选主;常见 Patroni + DCS,或云托管封装 failover
读扩展入口ProxySQL / 多 DataSource / 只读 endpointreadPreference(读偏好)只读 URL / Pgpool / 云只读 endpoint
写扩展另议分库分表Sharding(每 shard 仍是一个 RS)Citus / 分区 / 业务分片

Mongo 再补一句硬边界:Replica Set 解决 HA;Sharding 解决写与数据量水平扩展——每个分片通常仍是一个副本集。Secondary 可读,不等于「只能当备份机」。

PostgreSQL 自建侧:选主常见 Patroni;连接侧常见 PgBouncer(连接池)挡在应用与库之间——池与选主是两层,别当成一个开关。托管 PG 能做 HA,不等于「原生流复制 alone 就自动帮你完整选主」。


应用怎么连:本文最重要的差异

人话结论:MySQL / PG 家族多是「主地址 +(可选)从 / 代理」;Mongo 副本集把拓扑发现收进官方驱动,一个连接串是常态。

MySQL / PostgreSQL 家族

  • 配置写 URL + 可选读 URL;或单一入口,由代理按规则分流。
  • 同一接口又读又写:写与「读己之写」钉主;事务常整段粘主。
  • 心智:历史是 host:port + 中间件;拓扑发现不是 JDBC / 常见驱动的默认中心能力。

MongoDB

  • 推荐 mongodb+srv://(或带 replicaSet= 的标准 URI)。
  • 禁止把某个 Secondary 主机名写死成「长期从库 URL」。
  • 默认 readPreference=primary:读写都打 Primary。
  • 心智:协议 + 官方驱动把「谁是主、怎么重连」做成一等职责 → 一个连接串是常态。

对照表

维度MySQLMongoDBPostgreSQL
典型配置多 URL / 代理一个 RS / SRV主 + 可选备 / 代理
拓扑发现弱(靠中间件或云 DNS)驱动内建有限(多 host / 托管 endpoint)
默认读落点看框架与配置primary通常主库
写重试应用 / 中间件retryWrites(仍要业务幂等;默认是否开启随驱动版本 / URI 而异,以目标驱动文档为准)应用

不是 Mongo「不能像 MySQL 配多从库」,而是把 MySQL 里常手写的路由,收进了官方 driver。需要时仍可以两个 MongoClient(例如一个钉 primary、一个 secondaryPreferred),但不要绑死节点 hostname。

MySQL PostgreSQL 多地址与代理对比 MongoDB 单 URI 加驱动发现
MySQL PostgreSQL 多地址与代理对比 MongoDB 单 URI 加驱动发现 · 点击查看 SVG 原图

读偏好参数怎么选、弱读声明落在哪一层——同站另有深文,本文不展开成第二篇 readPreference 手册。


读写分离:要不要做

默认:写 + 需要 read-your-writes(读己之写)→ 打主;报表 / 可滞后读再拆。分离不是免费午餐。

适合拆读不适合拆读
信号主被只读压满;接受滞后;有 lag 监控与回退开关下单后立刻读订单;余额 / 权限 / 状态机;用拆读掩盖慢 SQL
代价replication lag(复制延迟);偶发读己之写失败——
误判「有从库就该拆」「拆了就等于强一致」

清单(选型页可贴顶):

  1. 瓶颈已证明是主上的只读压力,不是缺索引 / N+1。
  2. SLA 允许「旧一点」。
  3. 有延迟监控与告警。
  4. 有一键回退打主。
  5. 强一致路径钉主,不继承弱读默认。

Mongo 侧再钉一句:加强写确认(如 majority writeConcern)不是「免费在从库上读到强一致」。Concern 管写入确认范围;读落点仍由 preference 与产品语义决定。

读打主还是副本的决策简图
读打主还是副本的决策简图 · 点击查看 SVG 原图

Failover、脑裂与进行中的写

选主之后,应用侧合同是:丢掉坏连接、发现新写入口;超时的那次写,默认按「至少一次」做幂等,不要假设恰好一次。

MySQLMongoDBPostgreSQL
选主谁做工具 / 云 / Group Replication成员投票(多数派)Patroni / 云
应用要做什么重连写地址或经代理拿新主驱动发现新 Primary重连主 endpoint;丢弃坏连接

脑裂(split-brain)边界人话:

  • Mongo:靠多数派法定人数,少数派不能随便升主。
  • 异步 MySQL:错误双提升危险——两边都以为自己是主。
  • Patroni:必须能 fence(隔离)旧主,避免双写。

客户端超时 → 你不知道成功与否 → 至少一次投递 + 业务幂等。retryWrites 减轻的是驱动层可重试写;它不能替代订单号 / 幂等键一类业务合同。


一致性对照:概念相近,参数不等价

加强写确认降 RPO(恢复点目标)、抬延迟;关键读打主才容易读己之写——不要把三库参数当成「同一旋钮改个名」。

意图MySQL 常见说法MongoDBPostgreSQL
写多确认几份再返回semi-sync 等writeConcern(如 majority)sync standby / 同步备
读尽量新打主readPreference=primary打主
读可旧换余量打从 / 代理规则secondaryPreferred 等只读 endpoint / 代理

上表是教学对照「加强写确认 / 读落点」意图,不是参数一一等价,也不可按列名直接换名迁移。加强写侧确认:RPO 更好看,延迟与可用性窗口更紧。关键读打 Secondary / 从库:就接受滞后可见——产品语义优先于「技术上能拆」。


可观测:卡死看实时,事后看采样

正在卡死:看实时会话视图;已经结束:看慢日志 / 采样统计。 各家云控制台的「Top operations」类榜单,排障经验上多偏已完成且采样的操作——这是跨产品归纳,不是某一控制台官方逐字定义;若要钉死某产品行为,以该产品公开文档为准。

场景看什么(公开常见入口)
正在卡MySQL PROCESSLIST;Mongo currentOp;PG pg_stat_activity
已经结束慢日志;Mongo profiler;PG pg_stat_statements

被 kill 掉的长查询,未必进「Top」榜。排障时先问:我看的是当时现场,还是事后均值?


反模式

从架构视角看,下面几条会把「上了集群」用成「假装解决了可用与正确性」。

  1. Mongo 写死 Secondary IP / 主机名当从库 URL
    角色会变;绑死节点等于自己关掉驱动发现。

  2. 高延迟副本扛核心读,且无 lag 告警
    用户看到的是错账窗口,不是「读扩展成功」。

  3. 用 R/W 分离掩饰慢 SQL / 缺索引
    火力从主挪到从,两边一起热。

  4. 事务内读从库却假设强一致
    合同自相矛盾;读己之写必炸。

  5. Failover 后连接池仍握旧主
    选主成功了,应用层还在对尸体说话——要丢坏连接、刷新写入口。

  6. 把分片当 HA,或把 HA 副本当写扩展
    维度正交;混谈会选错拓扑。


选型结论

  1. 三个正交目标先分清:HA、冗余持久性、读扩展;写扩展另开一题。
  2. 连接心智对照:MySQL / PG 常是主 +(可选)从 / 代理;Mongo RS 常是单 URI + 驱动发现,默认打 primary。
  3. 读写分离有代价:默认写与读己之写钉主;可滞后路径再拆,并配监控与回退。
  4. Failover 合同:重连 / 发现新主 + 至少一次幂等;别假设超时等于失败或成功。
  5. 先做对连接、failover、幂等与观测,再谈拆读与跨地域。
场景选型起点(业界常见归纳)
关系模型、强事务托管 MySQL / PG HA;读写先走主
文档模型、预期水平扩展托管 Replica Set;单一 SRV;默认 primary;真不够再分片
从「多 DataSource」迁到 Mongo不要惯性再配「从库 URL」