四卷规划 · 卷一 共识与存储 · 卷二 控制面与调谐循环 · 卷三 调度与资源 · 卷四 网络、存储、多集群与一致性边界
本卷阅读路径
flowchart LR
Net["第 1 章 · 分布式网络模型"] --> SVC["第 2 章 · Service 与负载均衡"]
SVC --> Policy["第 3 章 · 流量策略"]
SVC --> DNS["第 4 章 · 分布式命名与 DNS"]
Policy --> Seven["第 5 章 · 七层流量治理"]
Storage["第 6 章 · 分布式存储抽象"] --> CSI["第 7 章 · CSI 与卷生命周期"]
CSI --> Data["第 8 章 · 有状态数据分布"]
Data --> Backup["第 9 章 · 备份、容灾与恢复"]
Seven --> Fed["第 10 章 · 多集群联邦"]
Data --> Fed
Fed --> MCS["第 11 章 · 跨集群流量与选举"]
MCS --> ReadPath["第 12 章 · 一致性读路径"]
ReadPath --> SplitBrain["第 13 章 · 脑裂与故障域"]
SplitBrain --> Chaos["第 14 章 · 混沌工程与故障注入"]
Chaos --> Close["第 15 章 · 收口"]
Seven --> MCS
卷四从「网络如何变成分布式抽象」入手:先建立扁平网络与 IPAM 模型,再进入 Service 虚拟 IP 与 kube-proxy 数据面,随后展开流量策略、DNS 与七层治理;接着把镜头转到「存储」——PV/PVC 抽象、CSI 卷生命周期、有状态数据分布与备份容灾;最后进入多集群与一致性边界:联邦与跨集群流量、一致性读路径、脑裂与故障域、混沌工程,并以四卷主线回顾与设计原则清单收口。卷四解决「流量与数据如何跨节点、跨集群流动,一致性的边界在哪里」;卷一(共识与存储)、卷二(控制面与调谐循环)、卷三(调度与资源)提供前提。
怎么读这一卷
三条阅读路径
| 路径 | 章节顺序 | 建议周期 | 适合谁 |
|---|---|---|---|
| 网络主线 | 第 1–2 章 → 第 3–5 章 | 约 4 周 | 从扁平网络与 Service 出发,走流量策略、DNS 与七层治理。 |
| 存储与数据主线 | 第 6–7 章 → 第 8 章 → 第 9 章 | 约 4 周 | 从 PV/PVC 与 CSI 出发,看有状态数据分布与备份容灾。 |
| 多集群与一致性主线 | 第 10–11 章 → 第 12 章 → 第 13–14 章 → 第 15 章 | 约 5 周 | 从联邦与跨集群流量出发,直通读路径、脑裂与故障注入。 |
与站内既有内容的分工
| 书稿 | 负责范围 | 本卷如何处理 |
|---|---|---|
| 卷一 共识与存储:Raft 与 etcd | 状态怎么来的、怎么一致 | 不再讲 etcd/Raft,把「状态」当已就绪前提,讲网络与存储抽象及一致性边界 |
| 卷二 控制面与调谐循环 | 声明到收敛的控制回路 | 复用控制器与调谐语义,专注数据面、存储与跨集群机制 |
| 卷三 调度与资源 | 期望状态怎么放到机器上 | 复用资源与调度前提,讲网络、存储与多集群如何承载有状态与多集群负载 |
| 《游戏服务端架构》 四卷 | 服务端进程内的核心系统与契约 | 不写业务系统,讲集群层面的网络、存储与一致性机制 |
十五章依赖关系
| 章 | 标题 | 依赖 |
|---|---|---|
| 1 | 分布式网络模型 | 无 |
| 2 | Service 与负载均衡 | 依赖第 1 章的扁平网络与 IPAM |
| 3 | 流量策略 | 依赖第 2 章的 kube-proxy 数据面 |
| 4 | 分布式命名与 DNS | 依赖第 2 章 Service 语义 |
| 5 | 七层流量治理 | 依赖第 2、3 章的流量转发 |
| 6 | 分布式存储抽象 | 无(新领域,接续卷三资源) |
| 7 | CSI 与卷生命周期 | 依赖第 6 章的 PV/PVC 抽象 |
| 8 | 有状态数据分布 | 依赖第 6、7 章的存储与卷 |
| 9 | 备份、容灾与恢复 | 依赖第 7、8 章的快照与复制 |
| 10 | 多集群联邦 | 依赖第 1–9 章的单集群机制 |
| 11 | 跨集群流量与选举 | 依赖第 5、10 章 |
| 12 | 一致性边界:kubectl 读到什么 | 依赖卷二 watch/对象模型与第 11 章 |
| 13 | 脑裂与故障域 | 依赖卷一 etcd 分区与第 12 章 |
| 14 | 混沌工程与故障注入 | 汇总第 1–13 章 |
| 15 | 收口:从 K8s 看分布式系统设计 | 汇总第 1–14 章与全书 |
按问题追踪实现
- 从「一个 Service 怎么把流量送到后端」:沿1 、2 、3 阅读。
- 从「Pod 为什么会解析到错误地址」:沿1 、2 、3 阅读。
- 从「多集群流量怎么分配」:沿1 、2 、3 阅读。
- 从「写入成功了但状态没变」:沿1 、2 、3 阅读。
- 从「网络分区会不会丢数据」:沿1 、2 、3 阅读。
每条路径的机制都由 k8s-net-lab(private/labs/k8s-net-lab)验证:cd private/labs/k8s-net-lab && go build ./... && go test ./...,98 用例全过。
逐节索引
第 1 章 分布式网络模型
| 节 | 文章 | 核心内容 |
|---|---|---|
| 1.1 | 1.1 扁平 Pod 网络与 IP 分配 | 两级网段切分与 IPAM 顺序分配/释放复用/耗尽报错。 |
| 1.2 | 1.2 CNI 抽象与插件生命周期 | ADD/DEL/CHECK 生命周期与插件链分工。 |
| 1.3 | 1.3 从容器网络到节点路由 | 子网路由汇总、对称路由与故障转移。 |
第 2 章 Service 与负载均衡
| 节 | 文章 | 核心内容 |
|---|---|---|
| 2.1 | 2.1 ClusterIP 的分布式虚拟 IP 语义 | ClusterIP 虚拟 IP 语义与生命周期绑定。 |
| 2.2 | 2.2 kube-proxy:iptables/IPVS/eBPF | iptables/IPVS/eBPF 三种数据面对比与规则同步。 |
| 2.3 | 2.3 EndpointSlice 分片与数据面一致 | EndpointSlice 分片语义与数据面弱一致窗口。 |
第 3 章 流量策略
| 节 | 文章 | 核心内容 |
|---|---|---|
| 3.1 | 3.1 externalTrafficPolicy 与源地址保留 | externalTrafficPolicy 与源地址保留取舍。 |
| 3.2 | 3.2 拓扑感知路由与端点感知 | 拓扑感知路由与端点感知就近。 |
| 3.3 | 3.3 sessionAffinity 会话粘滞 | sessionAffinity 会话粘滞表与过期。 |
第 4 章 分布式命名与 DNS
| 节 | 文章 | 核心内容 |
|---|---|---|
| 4.1 | 4.1 CoreDNS 与 Service DNS 解析 | CoreDNS 与 Service FQDN 解析。 |
| 4.2 | 4.2 ndots、search 域与解析延迟 | ndots、search 域与解析延迟。 |
| 4.3 | 4.3 服务发现的最终一致性 | 服务发现最终一致性与陈旧窗口。 |
第 5 章 七层流量治理
| 节 | 文章 | 核心内容 |
|---|---|---|
| 5.1 | 5.1 Ingress 控制器的分布式路由 | Ingress 控制器最长前缀路由与健康摘除。 |
| 5.2 | 5.2 Gateway API 资源模型 | Gateway API 资源模型与权重路由。 |
| 5.3 | 5.3 多集群 Ingress 与服务网格 | 多集群 Ingress 跨集群分发与服务网格。 |
第 6 章 分布式存储抽象
| 节 | 文章 | 核心内容 |
|---|---|---|
| 6.1 | 6.1 PV/PVC/StorageClass 三级抽象 | PV/PVC/StorageClass 三级抽象与供给路径。 |
| 6.2 | 6.2 有状态应用存储生命周期 | 有状态存储生命周期:绑定→使用→释放→回收。 |
| 6.3 | 6.3 云盘 vs 分布式文件/块存储的一致性假设 | 云盘 vs 分布式存储的单写者与可见性档位。 |
第 7 章 CSI 与卷生命周期
| 节 | 文章 | 核心内容 |
|---|---|---|
| 7.1 | 7.1 CSI 规范:Controller/Node 插件与 gRPC | CSI Controller/Node 插件与三大 gRPC 服务。 |
| 7.2 | 7.2 attach/detach 的分布式协调 | attach 单写者独占、detach 先卸载。 |
| 7.3 | 7.3 快照/克隆/迁移的一致性语义 | 快照/克隆/一致性组的 all-or-nothing 语义。 |
第 8 章 有状态数据分布
| 节 | 文章 | 核心内容 |
|---|---|---|
| 8.1 | 8.1 Quorum 类拓扑约束 | Quorum 拓扑约束:跨 zone 满足多数派。 |
| 8.2 | 8.2 分片与副本在 K8s 的表达(CRD 层面) | 分片与副本的 CRD 表达与主从读路径。 |
| 8.3 | 8.3 跨节点复制与故障转移(Operator 视角) | Operator 视角的故障转移与副本自愈。 |
第 9 章 备份、容灾与恢复
| 节 | 文章 | 核心内容 |
|---|---|---|
| 9.1 | 9.1 应用一致性组与 CSI 快照 | 应用一致性组与 CSI 快照整体进行。 |
| 9.2 | 9.2 跨区域容灾与 RTO/RPO | 跨区域容灾 RTO/RPO 双指标达标。 |
| 9.3 | 9.3 etcd 备份与整体恢复的一致性边界 | etcd 备份只含已提交、恢复钳制 revision。 |
第 10 章 多集群联邦
| 节 | 文章 | 核心内容 |
|---|---|---|
| 10.1 | 10.1 拓扑与联邦模型(Karmada/Fed v2) | Karmada/Fed v2 拓扑与状态聚合。 |
| 10.2 | 10.2 跨集群资源分发与状态聚合 | 跨集群资源分发、跳过未就绪与版本记账。 |
| 10.3 | 10.3 联邦调度的最终一致性 | 联邦调度偏好选目标与调谐重试。 |
第 11 章 跨集群流量与选举
| 节 | 文章 | 核心内容 |
|---|---|---|
| 11.1 | 11.1 MCS API 与全局负载均衡 | MCS 端点聚合与占比加权轮询。 |
| 11.2 | 11.2 区域级 Leader 与故障转移 | 区域级租约选举、续租与失联接管。 |
| 11.3 | 11.3 全局一致性边界与双活/主备取舍 | 双活冲突风险 vs 主备单边写的取舍。 |
第 12 章 一致性边界:kubectl 读到什么
| 节 | 文章 | 核心内容 |
|---|---|---|
| 12.1 | 12.1 读路径:客户端缓存/apiserver/etcd 三层 | 读路径三层:客户端缓存/apiserver/etcd。 |
| 12.2 | 12.2 写确认与实际生效的差距 | 写确认≠实际生效≠完全收敛。 |
| 12.3 | 12.3 resourceVersion/observedGeneration 判断「最新」 | resourceVersion 与 observedGeneration 判最新。 |
第 13 章 脑裂与故障域
| 节 | 文章 | 核心内容 |
|---|---|---|
| 13.1 | 13.1 脑裂定义与 etcd 分区场景 | etcd 分区多数派仲裁与旧 Leader 隔离。 |
| 13.2 | 13.2 控制面/节点/数据面分区的表现与恢复 | 控制面/节点/数据面分区表现与追赶恢复。 |
| 13.3 | 13.3 故障域设计对一致性承诺的影响 | 故障域分散 vs 集中对多数派的影响。 |
第 14 章 混沌工程与故障注入
| 节 | 文章 | 核心内容 |
|---|---|---|
| 14.1 | 14.1 混沌实验的分布式原理 | 混沌实验注入→观察→恢复生命周期。 |
| 14.2 | 14.2 Chaos Mesh 架构与实验编排 | Chaos Mesh 实验队列与到期自动恢复。 |
| 14.3 | 14.3 故障注入如何验证各章一致性结论 | 故障注入验证各章一致性不变量。 |
第 15 章 收口:从 K8s 看分布式系统设计
| 节 | 文章 | 核心内容 |
|---|---|---|
| 15.1 | 15.1 四卷主线回顾 | 五条主线把四卷串成一张网。 |
| 15.2 | 15.2 分布式系统设计原则清单 | 五条设计原则清单与审计。 |
| 15.3 | 15.3 从 K8s 到自研系统的迁移路径 | 分阶段迁移、避免双写窗口的安全切流。 |
相关阅读
- 书稿专题 :站内全部书稿的入口。
- 卷一 共识与存储:Raft 与 etcd :控制面的状态与共识,本卷一致性边界的根基。
- 卷二 控制面与调谐循环 :声明式调谐与控制器模式,本卷控制器视角(CSI、Operator、联邦)的基础。
- 卷三 调度与资源 :资源与调度决策,本卷存储卷调度、多集群放置的前提。
- 《游戏服务端架构》 四卷:服务端进程内的网络与存储,与本卷集群网络、存储互补。
继续阅读
探索更多技术文章
浏览归档,发现更多关于系统设计、工具链和工程实践的内容。