《大规模分布式计算深入解析》12.3 复制诊断与故障恢复:队列不等于延迟秒数

system.replicas 的 absolute_delay 是秒;queue_size、inserts_in_queue、log_pointer、log_max_index 又是不同进度指标,不能用两个日志序号相减来冒充时间延迟。队列已拉满不表示所有 parts 都已应用可见。

复制诊断与故障恢复:队列不等于延迟秒数

system.replicas 的 absolute_delay 是秒;queue_size、inserts_in_queue、log_pointer、log_max_index 又是不同进度指标,不能用两个日志序号相减来冒充时间延迟。队列已拉满不表示所有 parts 都已应用可见。

机制与确认边界

恢复时检查 session、readonly、队列异常、丢失 part 和查询结果。损坏数据修复可能需要从其他副本抓取或特定恢复操作,并非所有元数据差异都能从日志自动重建;旧日志保留与现存数据决定恢复路径。

实现与验证范围

副本是同一分片的冗余拷贝,不能为“均衡”把数据复制到另一个副本后删除源副本的数据。增加副本、改变分片、存储卷移动分别是不同操作。实验保留相同数据的两副本,停机追齐后对账,而不追求各副本 part 数在每个瞬间完全相同。

本章共享图解见 12.1 的机制图 ,其中的状态与确认点需和本节一起阅读。

状态与时序补图

sequenceDiagram
    participant A as 副本一
    participant K as Keeper
    participant B as 副本二
    Note over B: 暂停进程,tmpfs状态保留
    A->>K: 登记新写任务
    A->>A: 按所选确认数返回或超时
    Note over B: 解除暂停
    B->>K: 拉任务到本地队列
    B->>A: 拉取所需数据
    B->>B: 应用并发布
    B-->>A: 同步后查询对账
    Note over A,B: log_pointer相同不代表队列都已应用

复现与资料

下载本卷实验包 ,按 README 运行 Java 8 lab.RunAll。单节点原生运行 clickhouse-probe.sh,多分片与复制实验运行 clickhouse_cluster.py;每个脚本仅把实际执行并断言的场景记为实测。外部源、真实 Kafka、TTL 介质、TPC-H 和未测版本的功能不包含在这些结果中。

卷十二目录 · 系列导读

继续阅读

探索更多技术文章

浏览归档,发现更多关于系统设计、工具链和工程实践的内容。

全部文章 返回首页

「books」更多文章

  1. 《大规模分布式计算深入解析·向量数据库与 AI 检索内核》 · 目录与学习路径(45 篇)
  2. 《大规模分布式计算深入解析》15.3 自研向量引擎:可执行骨架与工程缺口
  3. 《大规模分布式计算深入解析》14.1 Milvus:组件架构、段管理与检索链路