流批一体：从 Lambda/Kappa 架构到统一计算层
深入解析流批一体（Stream-Batch Unification）架构：流批分离的历史与痛点、Lambda 架构双链路的一致性问题、Kappa 架构的统一路径、流批同语义（Flink SQL/Table API）与窗口语义一致性、实时数仓与批处理对账方法、统一计算层选型（Flink/Spark/湖仓底座）、一张表的双模写入与增量回算、从流批分离到一体的分阶段演进路径与工程避坑清单。
tag
实时数仓
共 4 篇文章。
ClickHouse 实时数仓架构实战：分层设计、实时管道与 Lambda/Kappa
从 T+1 离线数仓到分钟级实时数仓，ClickHouse 是 OLAP 侧的核心引擎。本文系统讲解实时数仓的分层架构（ODS/DWD/DWS/ADS）、Kafka 到 ClickHouse 的实时管道、物化视图秒级预聚合、一致性/迟到数据/重放三大挑战、宽表窄表建模、Lambda 与 Kappa 架构选型，以及实时数仓的运维要点。
数据工程专题索引：从 ETL 到实时数仓的现代数据架构
数据工程是现代数据驱动组织的核心技术支柱，负责将原始数据转化为可信赖、可访问、可分析的数据资产。本专题系统覆盖数据采集与清洗、ETL/ELT 管道设计、批流一体架构（Spark/Flink）、实时数据仓库（ClickHouse/Doris）、数据质量监控与治理框架（Great Expectations/Soda Core）、数据目录与血缘追踪、Data Mesh 去中心化数据架构、数据平台工程（DBT/Dataform）以及云原生 FinOps 成本优化策略，并深入湖仓一体（Iceberg/Delta Lake/Hudi）、数据可观测性（Data Observability）、反向 ETL 数据激活与特征存储（Feast）、数据管道编排（Airflow/Dagster/Prefect）、指标层与语义层（MetricFlow）、SQL 查询优化（执行计划/分区裁剪）、Schema 迁移与数据演进（expand-contract/双写）、数据安全隐私合规（PII 识别/脱敏/GDPR）以及流处理窗口与水印进阶（事件时间/Exactly-Once）等深度专题，为数据工程师与平台架构师提供从概念到落地的完整知识体系。并补齐数据管道测试与 CI/CD（单元测试/数据 diff 门禁/制品晋级）、Spark 性能调优（Shuffle/内存/数据倾斜）、Flink 状态后端与 Checkpoint 调优、流式 SQL（Flink SQL/ksqlDB）、非结构化文档 ETL 与多模态数据、湖仓访问控制与权限治理（行过滤/列掩码/统一 Catalog）等进阶议题。
实时数仓架构实战：Kafka + Flink + ClickHouse 流批一体
从零构建基于 Kafka + Flink + ClickHouse 的实时数仓，涵盖数据采集、流式计算、OLAP 存储与实时大盘的全链路实战。