《大规模分布式计算深入解析》12.3 查询取消与资源回收

取消对外终态与资源回收是两条相关的时间线。取消发出后要停止新调度和输出发布,同时唤醒阻塞的执行路径。

12.3 查询取消与资源回收

取消对外终态与资源回收是两条相关的时间线。取消发出后要停止新调度和输出发布,同时唤醒阻塞的执行路径。

从客户端到资源租约

协调器接到取消请求,更新查询状态并阻止新增尝试。各节点停止读取源端和推动算子,唤醒等待页或缓冲额度的线程,关闭源连接,释放页和保留内存,清理本地 Spill 以及外部 Exchange 临时对象。未确认的节点需要超时、租约或垃圾回收;不能依赖所有 Worker 在线后才显示终态。取消与可重试失败分别分类。

若 16 个 Worker 每个曾占 2 GiB,登记中可能有 32 GiB 待释放。它是当时全部占满的配额模型。逻辑内存计数、物理 RSS、磁盘和远端对象清理速度各不相同。验收时让客户端暂停消费 Result Page,取消查询,观察哪些状态立即停止,哪些在 TTL 或回收后下降。

实验与资料

下载卷六实验包 ,参照包内 README。src/ 下的 Java 8 教学模型 · retry-trajectory.py 的故障轨迹。本章架构或流程见本章机制图 。

Trino 客户端协议 · Trino 容错执行

继续阅读

探索更多技术文章

浏览归档,发现更多关于系统设计、工具链和工程实践的内容。

全部文章 返回首页

「books」更多文章

  1. 《大规模分布式计算深入解析》15.3 落地:从 Neo4j 到自研图引擎
  2. 《大规模分布式计算深入解析·图计算与图数据库内核》 · 目录与学习路径(45 篇)
  3. 《大规模分布式计算深入解析》15.2 十一卷主线:从切分到图