《后端架构设计·高性能与高可用》附录 C 故障演练检查表
卷二的故障演练检查表:演练前必须确认的十项准备、影响范围与审批、观测空跑与数据重置、八个可重复注入的故障场景、每个场景的预期信号与通过标准、中止与回滚条件、执行记录表、时间线复盘与改进项跟踪、演练角色分工、七条禁止事项,以及可以打印的一页清单。
category
卷二的故障演练检查表:演练前必须确认的十项准备、影响范围与审批、观测空跑与数据重置、八个可重复注入的故障场景、每个场景的预期信号与通过标准、中止与回滚条件、执行记录表、时间线复盘与改进项跟踪、演练角色分工、七条禁止事项,以及可以打印的一页清单。
从《群岛纪元》一次掉落表热更导致历史抽奖无法复盘讲起,区分服务端权威随机、种子提交-揭示与客户端可验证三种做法;给出掉落表版本固定、HMAC 派生随机数、双分录账本与对账边界的 Go 实现,并用 7 组测试覆盖提交篡改、权重边界、版本回溯与账本非法分录。
卷二的性能指标速查:延迟分位数与直方图合并、吞吐与完成率、利特尔法则与排队深度、错误率与可用性、错误预算与 SLO 写法、资源饱和度、缓存与治理指标、指标采集的三种方式、常用公式与单位换算、标签与基数控制,以及十种常见误读和一套最小仪表盘配置。
待支付倒计时不该由本地时长递减,而要以服务端 expiresAt 为准,并用服务端时间校正本地时钟。本节讨论切后台、改系统时间、临期取消与支付回调竞争,给出一个可用假时钟验证的 TypeScript 倒计时模块、竞争裁决函数与真实测试运行输出。
卷二使用的压测工具与脚本速查:为什么自带 loadgen、开环与闭环的参数和输出字段、固定场景 P1/P2 的数据准备、流量回放的脱敏与到达过程拟合、延迟口径与采样显著性、结果 JSON 的最小字段、一次真实运行记录,以及压测前后必须检查的十二条事项。
服务端订单状态有八种,端上却要面对按钮、倒计时、浮层与列表刷新四类副作用。本节把状态映射写成纯函数,用未知状态的前向兼容、取消与支付的竞争分支、迁移副作用的去重,说明端上如何只做翻译而不发明状态,并附一组 L1 纯函数测试与完整真实运行输出。
用 node:http 从零实现一个可运行的模型网关:POST /v1/chat 同时支持非流式 JSON 与 SSE 流式,认证、校验、执行由阶段组合器串联,测试在 127.0.0.1:0 上真实监听端口,并断言 HTTP 状态、响应体与每一帧事件。
从《裂隙战场》一次只依据客户端完整性导致的误封讲起,把反作弊拆成客户端、网关、战斗服、经济审计与离线复核五层,逐层给出能发现什么、误伤什么、成本多少;实现一个带分层归因、阈值分级、哈希证据链与双层确认的 Go 评分引擎,并用 5 组测试验证单层不能直接封禁。
下单提交超时后,端上把「未知」当成「失败」就会诱导用户重复下单。本节用进入确认页生成的幂等键、五个内部状态与三种按钮出口,把双击、重试和返回重进收敛到同一个键上,并给出一个可用假时钟验证的 TypeScript 提交控制器与真实测试运行输出。
购物车的全选、半选、失效商品与限购,最终都会落到一个数字上:结算金额。本节把勾选状态建模成可售行的三态汇总,明确失效项不可选、限购按上限截断、服务端拒绝后只回退被拒绝的行,并用可运行代码验证勾选与金额联动,附真实测试输出、一次典型复盘与边界清单。
业务方不该为每家模型提供方写一套错误处理。本节把网关对外的请求、响应与错误收敛成一套契约,逐字段说明能力、预算、用量与降级,解释提供方错误码为什么必须留在网关内部,并给出按契约实现、可确定性测试的 mock provider,作为 3.3 实验的提供方基座。
从《裂隙战场》一次 180ms 往返延迟下的橡皮筋回拉讲起,拆开客户端预测、服务端确认、按 tick 历史重放与偏差统计的完整链路;给出整数坐标、序号去重、陈旧输入拒绝、RTT 分档降级四类约束下的 Go 实现,并用 6 组测试覆盖干净回放、服务端限速、预测窗口与乱序待重放。
价格明细不是五个孤立的数字,而是一份必须同版本的结算快照。本节拆开商品小计、优惠、运费、税费与实付五段,说明端上只能做展示层分摊与预演、不能产出最终金额,用最大余数法把优惠分摊到整数分,并用版本号拒绝过期明细,附可运行代码、测试输出与复盘推演。
顶号、地铁断网和跨网关迁移看起来是三件事,底层却是同一条会话状态机。本节用 epoch 作为 fencing token,定义 CONNECTED 到 CLOSED 的合法迁移、重连窗口与幂等恢复,并给出顶号踢旧连接、迁移后拒绝旧连接写入、重复 resume 不重复提升 epoch 的可运行实现。
游客购物车与服务端购物车合并,是交易端最容易被低估的一次状态冲突。本节把同 SKU 的数量策略、下架与删除的处理、时间戳与多端并发写成可测试的纯函数,验证合并顺序、上限截断与本地未同步修改的保留,并复盘一次登录合并把失效商品带进结算的事故。
「回声」同时服务主站与两个合作方后,密钥、配额、重试与审计散落在业务代码里。本节给出模型网关的职责判据,区分必须收进来的公共策略与必须留在业务层的语义,并用可运行的阶段组合器把认证、配额、执行与收尾串成一条可观测链路,同时说明哪些逻辑一旦放进来就会形成新的耦合源。
网关最常见的越界,是把业务规则写进转发层,结果一次活动改动就要发网关。本节划定连接终结、认证、路由、限流、协议转换和灰度标签的职责边界,比较粘性会话与无状态路由,用 rendezvous 哈希实现节点摘除后的最小重分配,并给出 drain 发布流程与故障兜底。
把卷二没有证明的跨节点假设整理成可交接的检查清单:六项假设逐条登记负责人、指标口径、验收方式和到期日,用 Go 校验器拦截缺字段、阻塞项无到期日、把 unknown 写成 measured 等自欺写法,并说明卷三将回答哪些问题、哪些证明仍待补齐。
《裂隙战场》《群岛纪元》《泡泡工坊》对延迟、推送与运维的要求完全不同。本节把短连接、长轮询、WebSocket 与 QUIC 放进同一张选型矩阵,给出硬约束筛选、加权打分、握手与重连预算,并说明团队只有两人或延迟要求宽松时,为什么不该自建长连接。
把数据库延迟、缓存整体失效、单实例丢失三个订单系统必测的 L2 故障做成进程内可重复回归:用内存适配器和逻辑时钟记录成功、降级、失败、超时、P99 与恢复判定,给出可审计的判定边界和重试代价,并说明哪些结论必须留给卷四的真实混沌与网络分区验证。