《大规模分布式计算深入解析》8.2 RecordBatch 与压缩

解释校验、批编码和 fetch 大小。

解释校验、批编码和 fetch 大小。

实现机制

record batch 保存基准 offset、属性、事务标记和 CRC 等。压缩载荷通常按批组织,broker 在某些校验、转换或重压缩场景可能解压。

Fetch 限制有分区和请求两个层次,较大的首批可能按 API 规则获准返回。链路容量不是协议吞吐上限。

本章流程图见 8.1 Kafka 请求与版本协商 。

验证

用有压缩和无压缩的同一批比较载荷、客户端报文和磁盘记录。

下载实验包 · 本卷目录 · 系列导读

一手资料

继续阅读

探索更多技术文章

浏览归档,发现更多关于系统设计、工具链和工程实践的内容。

全部文章 返回首页

「books」更多文章

  1. 《大规模分布式计算深入解析》15.3 落地:从 Neo4j 到自研图引擎
  2. 《大规模分布式计算深入解析·图计算与图数据库内核》 · 目录与学习路径(45 篇)
  3. 《大规模分布式计算深入解析》15.2 十一卷主线:从切分到图