0. 全局鸟瞰
- 计算机基础：网络（TCP/UDP、HTTP/WS/QUIC）、操作系统（进程/线程/协程、内存管理、锁/无锁）、数据结构与算法、编译与性能。
- 服务端语言与工程化：Go/Java/Rust；单元/集成测试、CI/CD、日志与指标、可观测性、故障演练。
- 实时通信：长连接网关、房间服/世界服、Tick/帧同步、预测回滚、AOI/ECS、状态压缩与增量。
- 会话与身份：账号模型、JWT/Session、Refresh Token、黑名单与踢下线、第三方登录。
- 数据与存储：事务建模、MySQL/ClickHouse/Redis、事件溯源、读写分离、冷热分层、归档与合规。
- 消息与任务：Kafka/NATS/RabbitMQ、延迟队列、重试与幂等、事务外盒（outbox）。
- 业务子域：匹配、房间、聊天/公会/邮件、经济系统（道具/货币/掉落）、排行榜、活动与赛季。
- 安全与反作弊：协议签名、篡改检测、行为画像、风控与封禁策略、服务端权威判定。
- 伸缩与可靠：分片/一致性哈希、限流/熔断/降级、灰度发布、容灾多活、成本优化（QPS/并发/带宽）。
- 云原生：容器/K8s、服务发现、Sidecar、可观测、Serverless Room 模式与边界。
- 合规与变现：日志留存、隐私与年龄分级、支付风控、广告与道具、税务合规。
1. 学习四阶段路线（0→1→10→100）
Stage A（0–4 周）基础打牢
- 网络：三次握手、滑动窗口、Nagle/延迟确认、UDP 特性、WS/HTTP/2/3。
- 语言复盘：Go 并发（goroutine、channel、context、内存模型）、Java 并发、Rust 所有权/借用。
- 工具链：Git、Makefile、Docker、k9s/Helm、Grafana+Prometheus、pprof/JFR/flamegraph。
产出：一个回声聊天室（WS），带 Prometheus 指标与 pprof/heap/trace。
Stage B（5–10 周）通信与状态
- 帧/状态同步模型（锁步、预测回滚、快照+增量），AOI/ECS 基石。
- 会话与身份（JWT、Refresh、黑名单、多端登录策略）。
- 数据建模：账户/角色/道具/背包/订单/日志的表设计与索引。
产出：RPS 1v1 与 井字棋：匹配→房间→判定→结算→复盘，断线重连，Elo/Glicko-2 排位。
Stage C（11–20 周）业务与伸缩
- 匹配系统（搜索半径/超时退火、分层、跨区）、排行榜（滑动窗口/周期清算）。
- 经济系统（货币流入/流出、水位监控、反失衡）、活动赛季（日常/周常/通行证）。
- 消息总线（Kafka/NATS）、延迟任务、幂等与 Exactly-once 近似实现。
产出：小型实时对战或轻 SLG 城市（10v10 或异步）：房间生命周期、地图分区、快照回放。
Stage D（21–36 周）稳定性与云原生
- 网关/世界服拓扑、分片与跨服、跨区大地图（MMO/SLG）。
- SRE 套件：混沌演练、容量评估、流量回放、压测与成本模型。
- 合规/风控：审计日志、GDPR/未成年、防沉迷、支付风控。
产出：可运维的演示集群：自动化部署、观测与告警、弹性扩缩容与滚动升级。
2. 核心概念由浅入深
2.1 网络与协议
- 传输选择：TCP（可靠/有序）vs UDP（低延迟/丢包可接受）；QUIC（0-RTT、拥塞控制）。
- 应用协议：WebSocket（握手/心跳/复用）、gRPC（HTTP/2）、自定义二进制（长度前缀+CRC）。
- 序列化：JSON（易调试）→ Protobuf/FlatBuffers（体积与 CPU）→ Bitpacking/Varint/差分。
Go 房间 Tick Loop（简化版）：
type Room struct {
id int64
tick *time.Ticker
users map[int64]*Conn
state *WorldState
inbox chan ClientMsg
quit chan struct{}
}
func (r *Room) Run() {
r.tick = time.NewTicker(50 * time.Millisecond) // 20 TPS
defer r.tick.Stop()
for {
select {
case <-r.tick.C:
r.step()
case msg := <-r.inbox:
r.apply(msg) // 只修改 CommandBuffer, 不直接改世界
case <-r.quit:
return
}
}
}
2.2 会话与身份
- 账号/角色/租户/设备的关系；多角色与跨区，角色名唯一性策略。
- JWT + Refresh：短令牌+长刷新、黑名单与版本号强制下线；第三方登录（OAuth）绑定。
- 风险点：Token 泄露、防重放（nonce + 过期 + 绑定设备/IP 策略）。
2.3 状态同步与一致性
- 模型对比：服务器权威（Authority）、帧锁步（Deterministic Lockstep）、预测回滚（Rollback）、快照+增量（Snapshot+Delta）。
- AOI（Area of Interest）：网格/四叉树/经纬度分区，广播范围与优先级；冷热更新。
- ECS：组件化、系统驱动、确定性（整数化、随机种子、顺序固定）。
2.4 数据持久化与日志
- OLTP：MySQL/InnoDB（行锁/二级索引/自增与雪花）、一致性视图。
- 缓存：Redis（TTL/分布式锁/布隆过滤器/位图/Stream）、热点 Key 与淘汰。
- OLAP：ClickHouse（列存/向量化/分区/聚合），用于留存/漏斗/经济平衡分析。
- 审计日志：不可篡改链、事件溯源（Event Sourcing）与回放。
2.5 消息与任务
- Kafka：分区/副本/ISR、At-least-once、幂等 Producer、事务外盒（Outbox）。
- 延迟/定时：基于 Redis ZSet、Kafka 轮询、或专用 DelayQueue；重试退避与死信。
- 幂等：业务 ID + 去重表；Exactly-once 的工程实践边界（幂等写 + 事务边界）。
2.6 业务子域（高频）
- 匹配：MMR/Elo/Glicko-2、分层匹配、等待时间-质量权衡、跨区代价。
- 房间：生命周期（创建/准备/对局/结算/回收）、容量/并发模型、秒级弹性。
- 聊天/公会/邮件：持久化、反滥用（限速/敏感词/灰度）、层级权限。
- 经济系统：货币/道具/合成/掉落；水位监控、通胀控制、回收机制（税/耐久/手续费）。
- 排行榜：时间窗、去重与反刷、周期重置与快照存档。
2.7 安全与反作弊
- 协议签名、消息序号与回放检测；客户端只做预测与渲染，判定在服务端。
- 行为画像（速度/位置异常、统计异常）、设备指纹、灰黑名单。
- 风控：登录/支付/交易限额、可疑地理位置、P2P 交易冷却。
2.8 性能与稳定性
- 容量规划：QPS = 用户数 × 交互频率 × 消息扇出；带宽 = 包大小 × 频率 × 扇出。
- 优化序列：协议压缩→批量/合并→零拷贝→锁竞争→内存碎片→GC 压力→NUMA/亲和性。
- 保护策略：限流（令牌桶）、熔断、降级（关闭高频推送/重放间隔）、背压（Mailbox 滑窗）。
2.9 云原生与架构
- 拓扑：单体→分层→网关+房间（水平扩展）→微服务化→多集群多地域。
- 服务发现：注册中心/Sidecar；蓝绿/金丝雀、回滚与影子流量。
- Serverless Room：每房间一个 Pod/容器的利弊（隔离/成本/冷启动/调度瓶颈/网络带宽）。
3. 典型架构蓝图（优缺点速记）
- 单体 + 内嵌房间管理
- 优：开发快、调试简单。缺：扩展与容灾差；大型项目难演进。
- 网关 + 房间服（水平扩）
- 优：契合实时房间；易做弹性扩缩、限流和灰度。缺：跨房/跨区状态共享复杂。
- 网关 + 世界服 + 分片/跨服
- 优：MMO/SLG 适配；拥有大地图与全局经济。缺：复杂度高、跨服一致性与运营成本高。
- 微服务 + 事件驱动（Kafka/NATS）
- 优：团队协作与独立部署、可观测好。缺：事务边界、链路时延与调试难度提升。
- Serverless Room（房间即容器）
- 优：隔离性强、自动回收。缺：冷启动、调度极限、节点带宽/Pod 数量上限（CNI/iptables 开销）。
4. 数据建模与事务边界（游戏味道）
- 账户域：user/account/device、角色 role、跨区/分区映射。
- 道具域：Item/Inventory、唯一物品 vs 可堆叠、耐久/绑定/过期、经济日志（双式分录）。
- 战斗域：Room/Match/CommandBuffer/Replay、反调试字段（签名/随机种子）。
- 事务策略：强一致（扣费/交易/订单）走数据库事务 + Outbox；最终一致（排行榜/喇叭）走异步事件。
5. 指标与日志（开箱即用清单）
- 连接面：
gateway_active_conns，ws_messages_in/out_total，heartbeat_lag_seconds。 - 房间面：
room_active_count，room_tick_duration_seconds（P95/99），room_broadcast_bytes_total。 - 匹配面：
match_queue_size，match_duration_seconds，match_cancel_total。 - 经济面：
currency_inflow/outflow_total，shop_txn_success/failed_total。 - 系统面：
gc_pause_seconds_total、goroutines、fd_used、process_resident_memory_bytes。 - 日志规范：结构化 JSON（trace_id、user_id、room_id、shard、latency、err_code），分级与采样。
6. 测试与质量保障
- 确定性测试：固定随机种子 + 指令回放；帧序一致性校验。
- 对抗测试：故意乱序/丢包/重复包/延迟包；客户端非法输入 Fuzz。
- 回归与录播：保存 Replay（压缩/去重），版本升级自动回放比对。
- 压测：模拟长连接/房间广播、扇出矩阵，观测 GC/延迟抖动与带宽峰值。
7. 安全基线清单
- 传输加密（TLS/QUIC）、签名与重放窗、服务端权威；经济敏感接口强校验与限速。
- 灰度风控：登录/支付/交易阈值，设备/IP 画像；策略可配、可回溯。
- 数据合规：隐私与未成年人合规、留存周期、删除与导出流程。
8. 练手项目序列（每个 1–2 周）
- WS 回声聊天室（心跳、限流、指标）
- RPS 1v1（匹配、房间、判定、Elo）
- 井字棋/四子棋（观战、复盘、断线重连）
- 帧同步 Pong（20/30/60TPS、预测回滚）
- 轻 SLG 城市（异步任务、经济流水、排行榜）
- 小型实时大乱斗（AOI 广播、缩圈、掉线恢复）
每个项目都要：API/协议文档、Prometheus 指标、Grafana 看板、压测脚本、问题复盘（ADR）。
9. 项目骨架模板（Go 示例）
/cmd
gateway/ # 长连接网关
room/ # 房间服（Tick/AOI/ECS）
world/ # 世界/跨服协调
/internal
auth/ # JWT/Refresh/BlackList
match/ # 匹配引擎
economy/ # 货币/道具/订单
chat/ guild/ mail/ # 社交域
storage/ # MySQL/Redis/ClickHouse
mq/ # Kafka/NATS（outbox/consumer）
proto/ # Protobuf/IDL
telemetry/ # metrics/log/trace
config/ # 配置与灰度
pkg/ # 通用库（id, retry, pool）
/deploy
helm/ terraform/ k8s-manifests/
/docs
api.md, adr-*.md, runbook.md
10. 常见坑与避雷
- goroutine 泄漏：读写阻塞、chan 未关闭、context 未取消、
time.Ticker未 Stop。 - N+1 广播：未做 AOI/距离裁剪；带宽爆炸。
- 锁住世界：房间逻辑持锁做 IO；需 CommandBuffer + 逻辑/IO 解耦。
- 过度微服务：早期拆太细，事务边界与调试成本飙升。
- 幂等缺失：重试引发重复扣费/发货；务必有业务幂等键。
- 统计失真：客户端上报为主，易被刷；关键指标以服务端权威为准。
11. 面试/自检题纲（抽样）
- TCP 拥塞控制、半连接队列和 SYN Flood 防护策略？
- 帧同步与预测回滚如何保证确定性？浮点改整数的实操点？
- Kafka 精确一次的工程化边界？如何实现“业务的”Exactly-once？
- Redis 的热点 Key 与大 Key 爆炸如何治理？
- 跨服/跨区的身份映射与全局唯一 ID 策略？
- Serverless Room 的调度与网络带宽上限如何评估？
12. 15 周进阶学习计划（可直接执行）
- 第 1–2 周：网络/并发/pprof；做回声聊天室。
- 第 3–4 周：JWT+Refresh+黑名单；加到聊天室与管理端。
- 第 5–6 周：RPS 1v1（匹配/房间/判定/复盘）；接 Prometheus。
- 第 7–8 周：Pong 帧同步（预测回滚/重连）；做压测与重放。
- 第 9–10 周：Kafka 事件流 + 延迟任务；订单→发货幂等。
- 第 11–15 周：轻 SLG 城市（异步经济、排行榜）；部署到 K8s，做金丝雀与回滚。
13. 一页备忘（你可以贴墙上）
- 三问法：这条消息必须实时吗？能否批量？结果能否最终一致？
- 三把斧：裁剪（AOI/差分）→ 合并（批量/缓冲）→ 异步（队列/Outbox）。
- 三指标：P99 延迟、GC 暂停、广播字节数（带宽）。
- 三保障：幂等键、重放窗、观测（日志+指标+Trace）。
继续阅读
探索更多技术文章
浏览归档，发现更多关于系统设计、工具链和工程实践的内容。