《大规模分布式计算深入解析》7.2 资源组、并发隔离与内存配额

资源组配置决定谁可以申请容量、如何等待以及发生竞争时优先谁。并发上限、内存额度、CPU 权重和预留含义不同。

7.2 资源组、并发隔离与内存配额

资源组配置决定谁可以申请容量、如何等待以及发生竞争时优先谁。并发上限、内存额度、CPU 权重和预留含义不同。

分层计量

一个教学节点可用于查询的 128 GiB,若保守按 2 GiB/查询为 64 份,独立配置的 CPU 执行槽位数 32 把并发模型压到 32。32 代表配置上限,并非由 32 核直接等价得出。生产分析要看占用分布、下游容量、节点局部峰值与每组达标率。50/30/20 的比例可以用作权重示例,只有明确给独占预留时才保证有这部分可用容量。

在 Trino 资源组上比较 hardConcurrencyLimit、maxQueued、softMemoryLimit 和父组继承限制。高优先级组借用空闲容量时,要说明借用的回收时机、在途任务是否能被抢占以及队列如何处理。验证应让交互和批查询同时到达,观察实际排队分摊、达标率和源端连接压力。

实验与资料

下载卷六实验包 ,参照包内 README。src/ 下的 Java 8 教学模型。本章架构或流程见本章机制图 。

Trino 资源组

继续阅读

探索更多技术文章

浏览归档,发现更多关于系统设计、工具链和工程实践的内容。

全部文章 返回首页

「books」更多文章

  1. 《大规模分布式计算深入解析》15.3 落地:从 Neo4j 到自研图引擎
  2. 《大规模分布式计算深入解析·图计算与图数据库内核》 · 目录与学习路径(45 篇)
  3. 《大规模分布式计算深入解析》15.2 十一卷主线:从切分到图