《Kubernetes 分布式系统原理深入解析》12.3 更新模式:recreate/initial/off

VPA 的 updateMode 决定推荐如何兑现:Recreate 驱逐重建(有中断、需 PDB)、Initial 只注入新 Pod(温和但收敛慢)、Off 只建议不动(评估起点)。本节对比三种模式与稳定窗口的配合,并讲清 VPA 与 HPA 共存时必须分开指标源。lab 复用 autoscaler 用例验证推荐值是各模式的共同基础。

12.3 更新模式:recreate/initial/off

12.1 与 12.2 解决了「推荐从哪来」,本节回答推荐怎么兑现。VPA 的 updateMode 决定「推荐值落地」的激进程度:Recreate 驱逐重建、Initial 只照顾新 Pod、Off 只看不动。模式不同,对运行中 Pod 的打扰程度天差地别。本节讲三种模式的取舍、与稳定窗口/PDB 的配合,以及 VPA 与 HPA 共存时的经典坑。

读完本节,你应该能回答:三种模式各自在什么场景下选、Recreate 为什么需要 PDB、VPA 与 HPA 为什么不能同管 CPU。

三种更新模式总览

updateMode 是 VPA 对象 spec.updatePolicy.updateMode 的取值:

模式对运行中 Pod对新建 Pod适用
Recreate驱逐重建(受影响)注入推荐可以接受重启的稳定服务
Initial不动(不驱逐)注入推荐无法重启的工作负载
Off不动不动(只建议)只观测、评估 VPA 效果

注意一个容易混淆的点:Auto 是 Recreate 的超集/别名——VPA 文档把 Auto 作为默认值,行为上等价于 Recreate(既驱逐旧 Pod 又注入新 Pod)。本节的「Recreate」即涵盖 Auto。三种模式的共同前提是:推荐值都得先由 Recommender 算出来(12.1/12.2 已讲),模式只决定「算出来之后怎么用」。

为什么 Auto/Recreate 是默认?因为 VPA 的目标是让 requests 贴近实际,而这只有通过重建才能彻底兑现——Initial 只能覆盖新建、Off 完全不改。默认选 Recreate,是把「效果的彻底性」放在「对运行的影响」前面;要不要收敛这个激进度,由用户显式降级。

三种模式其实是在给两个组件分任务:Recreate/Initial 都让 Admission 在新 Pod 上注入;差别只在 Updater 是否驱逐旧 Pod(Recreate 驱逐、Initial 不驱逐)。Off 则把 Updater 与 Admission 同时停用,只剩 Recommender 在跑。理解模式 = 理解「哪个组件的开关被拨动」。

Recreate:驱逐重建的代价

Recreate 是默认也是最「激进」的模式:Updater 驱逐偏离推荐的 Pod,Deployment 重建,Admission 注入新值。它的代价分几层:

  • 中断窗口:每个被更新的 Pod 要经历「删除 → 新建 → 就绪」的完整生命周期。对无状态服务这是短暂的滚动,对有状态服务(StatefulSet)则是可感知的中断。
  • 需要 PDB 保护:Updater 尊重 PDB,但 PDB 只保证「任意时刻可用副本不低于预算」——它不保证更新期间没有中断,只是限制中断的同时数量。没有 PDB 或 PDB 过松,Recreate 可能一次性驱逐过多 Pod。
  • 驱逐速率限制:VPA 默认对驱逐做了节流,避免一台节点上一批 Pod 同时被换。这个限制与「把集群收敛到推荐」的速度是矛盾的:限得紧,收敛慢。
  • 对 StatefulSet/Job 的特别对待:VPA 对 StatefulSet 的更新会先检查,Job 类(一次性)工作负载一般不驱逐。

用 Recreate 的决策清单:服务能否容忍滚动重启?PDB 是否就位?更新频率是否受控? 三条都满足才选它,否则降级到 Initial。

Recreate 与 HPA 缩容还有一个交叉:VPA 驱逐一个 Pod,Deployment 重建它,如果 HPA 同时认为副本过多,缩容可能把刚重建的 Pod 又删掉——两个控制器在副本生命周期上也会「抢同一批 Pod」。这正是「VPA 与 HPA 共存」问题的第三个层面:不只是指标信号耦合,连 Pod 生命周期操作都会互相干扰。

Recreate 与 Deployment 的滚动发布是两个独立的动作:VPA 驱逐旧 Pod,Deployment 控制器把它重建;而版本发布改模板后,Deployment 自己按 maxSurge/maxUnavailable 滚动。两者可能同时发生——VPA 驱逐的 Pod 恰好是新版本,或正在发布中被 VPA 盯上。运维上要意识到:VPA 的 Recreate 不会等发布完成,它会按自己的节奏插入驱逐。

驱逐速率限制的直觉:VPA 的默认配置把每批驱逐的规模压得很小,配合 PDB 的可用性预算,一个 100 副本的工作负载全量更新可能需要数十分钟到数小时。这个时间跨度就是「有节制的收敛」的量级——它不是 bug,而是设计:把对服务的冲击摊开,同时换取 PDB 不被打穿。

Initial:只给新 Pod

Initial 模式只把推荐注入到新建 Pod,绝不驱逐运行中的 Pod:

  • 生效路径:只有「因扩容、滚动升级、节点迁移等原因天然新建」的 Pod 会拿到新推荐。存量 Pod 保持旧 requests,直到它们自己重来一次。
  • 适用场景:无法接受主动中断的工作负载——批处理 Job 跑到一半不能被 VPA 杀掉、有状态组件驱逐代价极高、或业务上「随时重启」不可接受。
  • 收敛代价:收敛完全依赖「自然的新建事件」。集群不扩容、版本不升级时,Pod 可能长期停留在旧 requests——Initial 的「温和」和「慢」是一体两面。

Initial 适合「先让新 Pod 拿到合理容量,存量逐步自然替换」的渐进策略。它让 VPA 的效果随着既有滚动自然地展开,不额外制造中断。

Initial 与扩容的交互值得注意:HPA 扩容出来的新 Pod 会拿到推荐,而存量 Pod 保持旧值——于是副本之间出现「一半新值、一半旧值」的过渡态。对大多数工作负载这没问题,但如果新旧 requests 差距很大,调度器看到的是一群「需求不同」的 Pod,装箱分布会略有不均。Initial 的温和背后,是这个暂时的不均匀。

Off:只观测不动

Off 模式关闭一切「执行」,VPA 变成一个纯粹的观测工具:

  • 只算推荐、绝不应用:Recommender 照常跑,status.recommendation 照常更新,但没有驱逐、没有注入。
  • 最佳用法:把 VPA 以 Off 模式挂到工作负载上先看一段时间——推荐值与当前 requests 的差异就是「VPA 会做多大的改动」的预览。确认改动可接受,再切到 Auto/Recreate。
  • 判断依据:对比推荐与现状,可以回答「超卖多少、该不该调」。比如现状比 P90 推荐高出 2 倍,说明长期闲置严重,值得切 Auto;若差异很小,切 Auto 也几乎无动作,说明早已合理。

用一个例子感受 Off 的用途:某工作负载现状 requests=2 核,P90 推荐只有 0.8 核。Off 模式下你直接看到「VPA 想砍掉 60% 的 CPU」——这个数字不切模式永远看不到。而 0.8 核还意味着「真实峰值远低于申请」,HPA 的利用率分母被 requests 虚高掩盖,这正是 12.2 提到「requests 与 target 耦合」的实据。

Off 是「安全上线 VPA」的必经第一步:先让它看,再让它动。生产上几乎不会有人一上来就开 Recreate,都会先用 Off 模式收集一段时间的推荐做评估。

Off 模式还有一个容易被忽略的副产品:它为「评估其他模式」提供对照。同一份推荐,先看它在 Off 下的「纸上效果」,再开 Recreate 看「实际效果」,两者对比就能量化「驱逐成本」——如果纸上与实际差异很小,说明驱逐换来的收益微乎其微。

从 Off 到 Recreate 的迁移路径

Off 不是终点,而是进入执行的观察站。一条常见的迁移路径:

  1. Off 挂载,观察 7–14 天:收集推荐与现状的差异分布,画出「VPA 想动多大」的直方图。
  2. 评估差异:若差异集中在 requests 偏大(超卖),切换到 Recreate 能回收大量资源;若差异小,说明现状已合理,甚至可以不开执行模式。
  3. 小范围试点:先在低峰工作负载上切 Recreate,观察驱逐速率、Pod 重建成功率与 PDB 命中情况。
  4. 全量切换并监控:上线后盯 OOM、延迟、驱逐次数三个指标,异常则回退到 Off。

这条路径的本质是「先观测、再小改、后全量」,与任何生产变更的灰度逻辑一致。直接一上来就 Recreate 的风险在于:你不知道推荐与现状的差异有多大、驱逐会给 PDB 带来多大压力。

更新模式与稳定窗口的配合

VPA 的更新节奏还与两个「稳定性」机制配合:

  • PDB 与驱逐节流:Recreate 的驱逐不是一次性全部执行,而是受 PDB 与速率限制约束地分批进行。可用性预算就是 VPA 的「稳定窗口」——它不限制时间,限制同时被换的副本数量。
  • minChange 阈值:Updater 只在「现状与推荐差异超过阈值」时才驱逐。差异太小不值得重启一次 Pod——这是 VPA 的「容忍带」,避免了推荐每次微调都引发一轮重建。
  • 与 HPA 缩容稳定窗口的类比:HPA 用时间窗口防止频繁缩容,VPA 用「差异阈值 + PDB + 速率限制」防止频繁重建。二者都是「给执行加阻尼」,只是阻尼的维度不同(时间 vs 数量)。

把「稳定」翻译成可观测的指标,就是三件事:副本数不乱跳(HPA 的稳定窗口)、requests 不频繁变(VPA 的 minChange)、每次变化都有 PDB 兜底(两者的可用性预算)。三种「稳定」叠加,才是生产集群的伸缩观感。

理解这个配合,就明白 VPA 的收敛是有节制的收敛:不是算出一个推荐就立即全量替换,而是按差异大小、可用性预算、驱逐速率逐步逼近。代价是慢,收益是稳定。

VPA 的收敛节奏还受「观察期」约束:一次驱逐后,Recommender 需要时间积累新 requests 下的用量样本,才能判断下一步。连续驱逐之间必须留出观察间隙——这就是为什么 VPA 不会把 20 个副本一夜之间全部换掉。把它理解为「慢速的、受观察驱动的滚动」,比理解为「一次性调参」更准确。

minChange 阈值还有个「方向不对称」的细节:调小 requests 与调大 requests 的阈值可以不同。放大 requests 影响的是「申请不足 → 可能 OOM」,缩小影响的是「过度申请 → 浪费成本」,两者风险不同,VPA 允许对它们分别设阈值——把「安全方向」设得比「省钱方向」更敏感,是常见的运营偏好。

VPA 与 HPA 共存时的建议

VPA 与 HPA 在同一工作负载上并存是常见需求,但有个官方明确警告的坑:不要对同一资源指标同时用 VPA 和 HPA。

  • 互相覆盖的信号:HPA 的利用率分母是 requests;VPA 改 requests,等于直接改变 HPA 的伸缩基线。VPA 把 requests 调高 → 相同负载下利用率变低 → HPA 认为不热 → 缩副本;VPA 调低 → 利用率变高 → HPA 扩容。两个控制器在抢同一个信号,容易打架。
  • 推荐的实践:HPA 用自定义/外部指标(QPS、队列深度)管副本数,VPA 管 CPU/内存 requests——把「横向(副本)」与「纵向(容量)」的信号来源分开。
  • 或者:VPA 保持 Off(只观测),HPA 按现状 requests 伸缩。等观测确认 requests 合理后,再把 VPA 调整后的 requests 固化,去掉 VPA。
  • 顺序:若必须同管资源指标,至少别让两者同时「执行」——一个执行、另一个只观测,是官方认可的安全形态。

官方文档对共存有一条明确口径:不要把 VPA 与 HPA 用在同一指标(如 CPU 或内存)上。理由是两者的反馈回路互相干扰——VPA 调 requests 会改变 HPA 的利用率分母,HPA 调副本又会改变 VPA 的画像样本量。想两者都管资源时,常见的妥协是「HPA 用自定义指标、VPA 管 CPU/内存」,或「VPA 只跑 Off」。这不是绕过,而是把耦合点显式拆开。

一句话:VPA 管「每个 Pod 要多大」,HPA 管「要几个 Pod」。维度正交,但信号耦合——耦合点就在 requests 上,所以要分开指标源。

还有一个实务判据:看 OOM 与延迟哪个先发生。如果工作负载主要是内存超卖导致的 OOM,VPA 的价值最大;如果主要是流量突增导致的延迟,HPA 才是主线。两者并存时,用「谁的信号更接近业务真相」来分:流量类指标归 HPA,资源类指标归 VPA。

选择模式的决策树

把三种模式的选择整理成一条可执行的判断链:

能容忍主动重启吗?
├─ 能 → 有 PDB 吗?
│        ├─ 有 → Recreate/Auto(默认)
│        └─ 无 → 先建 PDB 再 Recreate,或暂用 Initial
└─ 不能 → 需要新 Pod 生效推荐吗?
         ├─ 需要 → Initial
         └─ 不需要 → Off(纯观测)

关键不是「记住三种模式」,而是「先回答自己两个问题:能不能重启、要不要让新 Pod 生效」。答案组合决定模式,比记住模式再反推场景可靠得多。

三模式对比

模式旧 Pod新 Pod中断收敛速度PDB 需求典型场景
Recreate/Auto驱逐重建注入有(受 PDB/节流约束)快强烈建议无状态稳定服务
Initial不动注入无慢(靠自然新建)不需要批处理、不可重启
Off不动不动无不收敛(只建议)不需要评估、预览改动

选择路径:先 Off 看推荐 → 差异可接受且能容忍重启 → Recreate;不能容忍重启 → Initial;只想观测 → 保持 Off。这个决策链比「默认 Auto」更贴近生产实际。

无论选哪个模式,最终都要回到监控闭环:OOM、延迟、驱逐成功率、PDB 命中次数——这些是判断「模式选对了没有」的仪表盘。

三个常见误解

  • 「Auto 和 Recreate 有本质区别」——错误。Auto 是默认值且行为等价于 Recreate;真正需要区分的是「要不要驱逐旧 Pod」,即 Recreate 与 Initial 的区别。
  • 「Off 模式什么都没做」——错误。Recommender 一直在算、status.recommendation 一直在更新,只是不应用。Off 是评估 VPA 效果的正确起点,不是关闭 VPA。
  • 「VPA 和 HPA 可以一起管 CPU,一个调请求一个调副本,正好互补」——错误。HPA 的利用率分母是 requests,VPA 动 requests 就是在动 HPA 的基线,二者在同一指标上会打架。分开指标源才互补。

本节 lab

本节以「推荐值是各模式的共同基础」为由复用 12.1 的用例:

cd private/labs/k8s-sched-lab
go test ./autoscaler -run TestVpaRecommendation -v

三种模式的差异只在「推荐算出来之后怎么用」,而 TestVpaRecommendation 验证的正是推荐本身:对 0..99 取 P90 并按步长 10 规整为 90。无论 Recreate 驱逐、Initial 注入还是 Off 忽略,消费的都是同一个推荐值——先有正确的推荐,才有模式可言。这层「先算后用」的分工,是 12.1–12.3 的收束点。

把 lab 的 Recommend 放到三种模式的语境里:Recreate 模式下它决定「被驱逐后重建的 Pod 值」;Initial 模式下它决定「扩容新 Pod 的值」;Off 模式下它只写 status,供人查看。同一个函数、三种命运——这正是「先算后用」分层的价值:算法层与执行层解耦,模式随便切,推荐计算不重写。

一句话总结本节

VPA 的 updateMode 决定推荐如何兑现:Recreate 驱逐重建(有中断、需 PDB)、Initial 只注入新 Pod(温和但收敛慢)、Off 只建议不动(评估起点);三种模式都配合差异阈值与 PDB/节流做到「有节制的收敛」。与 HPA 共存时务必分开指标源,避免两个控制器在 requests 这个耦合点上打架。第 12 章到此闭合:画像出推荐,模式定节奏——而 12.1 的三组件、12.2 的百分位、12.3 的模式,合起来就是 VPA 从「观察」到「执行」的完整链路。

继续阅读

探索更多技术文章

浏览归档,发现更多关于系统设计、工具链和工程实践的内容。

全部文章 返回首页

「books」更多文章

  1. 《大规模分布式计算深入解析》15.3 落地:从 Neo4j 到自研图引擎
  2. 《大规模分布式计算深入解析·图计算与图数据库内核》 · 目录与学习路径(45 篇)
  3. 《大规模分布式计算深入解析》15.2 十一卷主线:从切分到图