ELT on PlumePHP

数据工程深度指南：Modern Data Stack 全栈实践

Tue, 01 Sep 2026 10:00:00 +0800

数据工程（Data Engineering）是连接原始数据与数据驱动决策的核心桥梁。Modern Data Stack（现代数据技术栈）以 ELT 为核心范式，以云数据仓库/湖仓为存储底座，以声明式工具替代手写代码，以 DataOps 重塑数据交付流程。本文从架构演进、核心组件、代码实践与数据治理四个维度，构建一份可落地的全栈深度指南。

数据管道设计模式：ETL vs ELT、增量同步与流批一体

Tue, 01 Sep 2026 00:00:00 +0000

数据管道设计是数据工程的核心。本文梳理六大关键模式：ETL/ELT 对比、批量处理、增量同步、CDC、流批一体与数据质量治理。

一、ETL 与 ELT：架构哲学的根本分野

ETL 在中间层完成清洗与转换，适合一致性要求高、目标算力有限的场景。ELT 将原始数据加载到 Snowflake、BigQuery 等弹性算力平台，以 SQL/dbt 在仓内转换，适合敏捷分析。

09. dbt 数据转换与 DataOps

Thu, 13 Aug 2026 16:09:00 +0800

dbt（data build tool）是数据工程领域最具影响力的开源工具之一，它将软件工程最佳实践（版本控制、模块化、测试、文档）引入数据转换流程。本文从 Core 概念到生产部署全面讲解 dbt 生态。