category

Books

共 3674 篇文章。
全部文章BooksgameJavaIndiegolang客户端开发MinigameSaasrustPythoncgTypescriptengineCocos
books

《Kubernetes 分布式系统原理深入解析》13.2 控制面/节点/数据面分区的表现与恢复

13.1 节把脑裂钉在复制组里,本节把分区放大到整个 Kubernetes:控制面多数派写可用、少数派写被拒不丢数据、节点分区降级但写可用、数据面失去多数派拒写;恢复后靠追赶日志追平。lab 用 splitbrain 包的 TestPartitionFaceBehavior、TestMinorityWritesRejectedThenHealed、TestRecoveryCatchUp 验证三类分区表现与追赶恢复。

10 分钟阅读
书稿 Kubernetes 分布式系统
books

《Kubernetes 分布式系统原理深入解析》13.1 脑裂定义与 etcd 分区场景

脑裂是网络分区把复制组成员切成多数派与少数派:多数派可提交、少数派被拒写;旧 Leader 落入少数派无法续租被隔离,任期单调递增防双主。本节用 etcd 三节点与五节点场景拆解仲裁、拒写与 fencing 三条机制。lab 用 splitbrain 包的 TestQuorumNumbers、TestMinorityCannotCommit、TestOldLeaderFenced 验证多数派计算、少数派拒写与旧 Leader 隔离。

10 分钟阅读
书稿 Kubernetes 分布式系统
books

《大规模分布式计算深入解析》1.1 数据密集计算的规模问题(数据量 vs 计算量)

把「数据量大到一台机器装不下、算不动」这一问题形式化:数据规模与计算规模随业务增长的不同曲线、单机吞吐/容量/可靠性的三重墙,以及分布式计算为什么是必然答案。lab 用本地化调度演示「把计算移到数据所在节点」是分布式计算的第一条收益。

9 分钟阅读
书稿 大数据 分布式计算
books

《Kubernetes 分布式系统原理深入解析》12.3 resourceVersion/observedGeneration 判断「最新」

resourceVersion 是 apiserver 全局单调的写序号,watch 增量推进缓存只前进不后退;generation 每次 spec 写入 +1,observedGeneration 由控制器追平,追平才算最新。本节剖析三种版本号各自的语义与判据,并用 readpath 包的 ReadPath/Object 验证 watch 增量推进、generation 对齐与过期判定。

9 分钟阅读
书稿 Kubernetes 分布式系统
books

《Kubernetes 分布式系统原理深入解析》12.1 读路径:客户端缓存/apiserver/etcd 三层

Kubernetes 的读请求可在三层命中:客户端 informer 缓存、apiserver 的 watch 缓存、etcd 的多数派读。层越深越新、越慢越贵;Fresh 判定用 seenRV ≥ writtenRV 判断读到的版本是否已包含某次写。本节剖析三层各自维护的 resourceVersion、watch 增量推进与 Fresh 判定,并用 readpath 包的 ReadPath 验证三层排序与写后新鲜度。

10 分钟阅读
书稿 Kubernetes 分布式系统
books

《Kubernetes 分布式系统原理深入解析》11.2 区域级 Leader 与故障转移

区域级单写者用租约式选举维护:候选续租成功即成为 Leader,续租把到期时间顺延一个租期,Leader 失联后租约自然过期,存活候选接管且任期单调递增。本节剖析租约结构、续租顺延、过期切换与任期防回跳,并用 mcs 包的 LeaderElection 验证租约内判定、过期失效与失联接管。

8 分钟阅读
书稿 Kubernetes 分布式系统
books

《Kubernetes 分布式系统原理深入解析》11.1 MCS API 与全局负载均衡

MCS API 用 ServiceExport 声明「可导出」、ServiceImport 声明「要导入」,控制面把各集群贡献的端点聚合进消费者集群的 EndpointSlice,本地数据平面按端点占比加权轮询分发。本节剖析导出/导入对象、端点聚合与加权轮询语义,并用 mcs 包的 ServiceImport/GlobalLB 验证跨集群聚合与 3:1 加权分发。

8 分钟阅读
书稿 Kubernetes 分布式系统
books

《Kubernetes 分布式系统原理深入解析》10.3 联邦调度的最终一致性

联邦调度用可插拔偏好(容量/区域)选择目标集群,调谐循环一遍遍把现状推向目标,未就绪集群被标记为待处理等待恢复。本节剖析选择、调谐、待处理记账与最终一致收敛四件事,并对比为什么联邦选最终一致而非强一致。lab 用 federation 包的 TestSchedulerChooseByPreference 与 TestReconcileEventualConsistency 验证按偏好选目标与调谐收敛。

10 分钟阅读
书稿 Kubernetes 分布式系统
books

《Kubernetes 分布式系统原理深入解析》10.2 跨集群资源分发与状态聚合

跨集群分发把一份资源推向所有就绪成员、跳过未就绪集群,并用 resourceVersion 记录每个集群的已下发版本;Pending 集群由「健康但落后」反推,状态聚合再把成员实际结果汇成总表。本节剖析分发、跳过、版本记账与落后识别四件事。lab 用 federation 包的 TestDispatchSkipsNotReady 与 TestPendingClusters 验证未就绪跳过与落后集群识别。

10 分钟阅读
书稿 Kubernetes 分布式系统
books

《Kubernetes 分布式系统原理深入解析》10.1 拓扑与联邦模型(Karmada/Fed v2)

联邦把多个各自拥有独立控制面的集群纳入一个统一控制面,形成「成员集群 + Region 分组 + 就绪状态聚合」的拓扑模型。本节剖析从 Federation v2 到 Karmada 的架构演进、成员集群如何按 Region 分组、就绪状态如何被控制面聚合成总表。lab 用 federation 包的 TestAggregateStatusByRegion 验证按 Region 聚合就绪集群数。

9 分钟阅读
书稿 Kubernetes 分布式系统
books

《Kubernetes 分布式系统原理深入解析》9.3 etcd 备份与整体恢复的一致性边界

etcd 是 K8s 控制面的唯一事实来源,备份它等于备份整个集群的声明状态。但快照只含已提交且已落盘的 revision,未 apply 的写被排除,恢复后 revision 被钳制回快照点、其后写全部丢失。本节剖析 etcd 快照的一致性边界、Lag 与恢复钳制,lab 用 backup 包的 EtcdBackup 验证快照边界与恢复回落两个语义。

7 分钟阅读
书稿 Kubernetes 分布式系统
books

《Kubernetes 分布式系统原理深入解析》9.2 跨区域容灾与 RTO/RPO

容灾计划用两个数字说话:RPO 是数据丢失窗口、RTO 是恢复时间。备份间隔决定 RPO 上限,从未成功备份则 RPO 不可估计;计划是否达标要看实际 RTO/RPO 是否同时压进目标。本节剖析 DRPlan 的测量与达标判定,lab 用 backup 包的 DRPlan 验证 RPO 窗口、无备份不可估计与目标达标三个语义。

8 分钟阅读
书稿 Kubernetes 分布式系统
books

《Kubernetes 分布式系统原理深入解析》9.1 应用一致性组与 CSI 快照

一个应用往往横跨多块卷(数据卷 + 日志卷),恢复时若各卷恢复到不同时间点,数据与日志就会错位。应用一致性组要求组内所有卷在同一时刻一起快照、all-or-nothing,失败则整组不产生记录。本节剖析崩溃一致性边界与组一致性的差别,lab 用 backup 包的 AppGroup 验证组内多卷同时快照与任一卷失败整组无记录的语义。

8 分钟阅读
书稿 Kubernetes 分布式系统
books

《Kubernetes 分布式系统原理深入解析》8.3 跨节点复制与故障转移(Operator 视角)

ShardSet CRD 只声明分片拓扑,让拓扑变成现实的是 Operator 的调谐循环:主副本故障时切换主到存活副本,副本不足时在可用节点上补齐。本节剖析故障转移与自愈两条动作的分工、执行顺序与容量边界,lab 用 stateful 包的 Operator 验证 FailoverSwitchesPrimary 与 OperatorHealsReplicas 两个场景。

8 分钟阅读
书稿 Kubernetes 分布式系统
books

《Kubernetes 分布式系统原理深入解析》8.2 分片与副本在 K8s 的表达(CRD 层面)

单份数据的复制组讲完,数据再被按 key 拆成分片、每片多副本,就形成分片集合。K8s 没有内建分片资源,要靠 CRD 把分片集合、主从结构与副本落点声明化,再交给 Operator 消费。本节剖析 ShardSet 表达与主副本读、故障读回退语义,lab 用 stateful 包的 ReplicaSet.Read 验证主副本健康读主、主故障回退存活副本、全故障不可读三条路径。

7 分钟阅读
书稿 Kubernetes 分布式系统
books

《Kubernetes 分布式系统原理深入解析》8.1 Quorum 类拓扑约束

多数派复制组的副本分布必须保证任意单故障域失效后仍过多数派:副本跨 zone 分布满足、副本集中同 zone 失败、两副本边缘场景是同一算术的三个面。本节用 topologySpreadConstraints 与 PodDisruptionBudget 表达 Quorum 拓扑约束,lab 用 stateful 包的 QuorumTopology 验证三种分布的多数派判定。

8 分钟阅读
书稿 Kubernetes 分布式系统
books

《Kubernetes 分布式系统原理深入解析》7.3 快照/克隆/迁移的一致性语义

快照、克隆与迁移是有状态数据运维的三件套,每件都背着一致性语义:快照要求卷已 attach 保证数据面静止,克隆从快照派生新卷,一致性组对多卷坚持全量或全不。本节用 CSI 视角拆解这三件套。lab 用 csi 包验证快照前置条件、克隆继承容量与一致性组 all-or-nothing。

8 分钟阅读
书稿 Kubernetes 分布式系统