复制诊断与故障恢复:队列不等于延迟秒数
system.replicas 的 absolute_delay 是秒;queue_size、inserts_in_queue、log_pointer、log_max_index 又是不同进度指标,不能用两个日志序号相减来冒充时间延迟。队列已拉满不表示所有 parts 都已应用可见。
机制与确认边界
恢复时检查 session、readonly、队列异常、丢失 part 和查询结果。损坏数据修复可能需要从其他副本抓取或特定恢复操作,并非所有元数据差异都能从日志自动重建;旧日志保留与现存数据决定恢复路径。
实现与验证范围
副本是同一分片的冗余拷贝,不能为“均衡”把数据复制到另一个副本后删除源副本的数据。增加副本、改变分片、存储卷移动分别是不同操作。实验保留相同数据的两副本,停机追齐后对账,而不追求各副本 part 数在每个瞬间完全相同。
本章共享图解见 12.1 的机制图 ,其中的状态与确认点需和本节一起阅读。
状态与时序补图
sequenceDiagram
participant A as 副本一
participant K as Keeper
participant B as 副本二
Note over B: 暂停进程,tmpfs状态保留
A->>K: 登记新写任务
A->>A: 按所选确认数返回或超时
Note over B: 解除暂停
B->>K: 拉任务到本地队列
B->>A: 拉取所需数据
B->>B: 应用并发布
B-->>A: 同步后查询对账
Note over A,B: log_pointer相同不代表队列都已应用
复现与资料
下载本卷实验包
,按 README 运行 Java 8 lab.RunAll。单节点原生运行 clickhouse-probe.sh,多分片与复制实验运行 clickhouse_cluster.py;每个脚本仅把实际执行并断言的场景记为实测。外部源、真实 Kafka、TTL 介质、TPC-H 和未测版本的功能不包含在这些结果中。
继续阅读
探索更多技术文章
浏览归档,发现更多关于系统设计、工具链和工程实践的内容。