category

database

共 166 篇文章。
全部文章gamegolang客户端开发MinigameSaasrustPythonJavacgTypescriptengineCocosMmodatabase
database

PostgreSQL 事务、隔离级别与锁:MVCC 快照、行锁/表锁、死锁检测与长事务治理

深入解析 PostgreSQL 事务体系:MVCC 快照与可见性规则、四种隔离级别(读已提交/可重复读/可串行化/SSI)的差异与异常、行锁与表锁的兼容矩阵、pg_locks 锁等待分析、死锁检测机制与避免策略、快照陈旧与长事务(idle in transaction)、事务重试与幂等设计、锁监控常用 SQL。

8 分钟阅读
PostgreSQL Isolation MVCC
database

PostgreSQL VACUUM 与表膨胀治理:MVCC 死元组、Autovacuum 调优与膨胀诊断

系统讲解 PostgreSQL 的 VACUUM 机制与表膨胀治理:MVCC 多版本并发控制如何产生死元组、VACUUM 与 AUTOVACUUM 的工作原理与触发条件、autovacuum 参数调优、表膨胀与索引膨胀诊断(pgstattuple/n_dead_tup)、手动 VACUUM FULL 与 CLUSTER、高频 UPDATE 场景的防膨胀设计,以及死元组监控与告警体系。

9 分钟阅读
PostgreSQL MVCC
database

PostgreSQL 索引类型深度实战:B-tree 原理、组合索引、GiST/GIN/BRIN 与索引维护

深入解析 PostgreSQL 全家族索引:B-tree 平衡树原理与索引高度、组合索引列顺序与最左前缀、跳跃扫描的真相、GiST 空间与范围检索、GIN 倒排索引(全文搜索/JSONB/数组)、BRIN 块范围索引、部分索引与表达式索引、覆盖索引 INCLUDE、索引膨胀诊断与并发重建。每个索引类型配真实 DDL、EXPLAIN 示例与选型决策表。

10 分钟阅读
PostgreSQL indexing gin
database

数据库高可用架构:主从复制、自动故障切换、脑裂防护与 RTO/RPO 工程

数据库挂了,业务就挂了——高可用(HA)的目标是把"数据库不可用"的概率压到最低,并在不可避免的故障发生时自动、快速、无感知地完成切换。但高可用不是"买几台机器做主从"这么简单:主从复制只是基础,真正难的是故障检测(怎么判断主库真挂了)、自动切换(谁能成为新主 …

8 分钟阅读
High Availability Failover replication
database

在线 DDL 原理与最佳实践:MySQL/PostgreSQL 大表变更的锁与数据拷贝

对千万级、亿级大表执行 ALTER TABLE 是最让 DBA 与后端工程师胆战心惊的操作之一:一个看似简单的加列、加索引,可能把业务写流量堵死几分钟,甚至引发锁等待风暴。问题的根源在于表结构变更需要在短时间内独占表锁、重写整张表。为此,数据库演进出了在线 DDL 机制(MySQL 的 InnoDB …

9 分钟阅读
MySQL PostgreSQL migration
database

分库分表中间件深度:ShardingSphere 架构、路由、改写与分布式治理

分库分表是单机数据库容量触顶后的必经之路,但"怎么分"只是开始——真正复杂的是分完之后:请求怎么路由到正确的库表、SQL 怎么写才能分片、跨分片查询怎么聚合、数据迁移与扩容怎么做。如果这些问题全部靠业务代码硬扛,系统会快速腐烂。分库分表中间件 …

8 分钟阅读
shardingsphere Sharding middleware
database

主从数据一致性校验与修复:chunk 对账、pt-table-checksum 与增量修复实战

“主从复制是自动的,所以主从数据一定一致”——这是运维里最大的错觉之一。binlog 丢失、复制中断、人为误操作、半同步降级、甚至程序 BUG,都会让从库与主库悄然分道扬镳。更隐蔽的是:复制通常不会报错,不一致像蛀虫一样潜伏,直到某个深夜的查询突然返回错误数据。数据一致性校验 …

8 分钟阅读
replication MySQL binlog
database

ClickHouse 列式数据库

ClickHouse 是一款由 Yandex 开源的面向 OLAP 场景的高性能列式数据库,以向量化执行引擎和极致查询性能著称。本专题系统覆盖列式存储架构原理、SQL 编写与性能优化、MergeTree 家族表引擎详解、数据接入与 ETL 管道、分布式分片+副本集群搭建、监控运维与冷热分层策略,以及实时分析场景(漏斗/留存/A-B 测试)的完整生产实践,并深入 MergeTree 合并原理与数据生命周期、物化视图与实时聚合、查询优化器与执行引擎、备份恢复与容灾、Kafka 实时管道、权限安全加固、复制表与跨机房容灾(ReplicatedMergeTree/ClickHouse Keeper/脑裂防护)、字典与维度 JOIN(Dictionaries/dictGet/星型模型)、列式压缩算法(LZ4/ZSTD/Delta/Gorilla Codec)、查询缓存与预热、时序分析最佳实践(降采样/异常检测)、Mutation 与 TTL(轻量删除/冷热分层)、窗口函数高级实战(排名/聚合/偏移/分布/滑动)、实时数仓架构(ODS/DWD/DWS/ADS 分层与 Lambda/Kappa)、对象存储 S3 集成(冷热分层/TTL 迁移/S3 备份/Data Lake)、生产性能调优(写入/查询/内存/集群)、Schema 建模最佳实践(主键/分区/压缩编码/宽窄表)、JSON 与半结构化数据处理(导入提取/展平/物化列/混合建模)、向量检索与 ANN 索引(HNSW/usearch/相似度查询)、全文检索与倒排索引(tokenbf_v1/text index/模糊匹配)、日志与指标存储(可观测性后端/Grafana/成本治理)、集群扩容与平滑升级(分片重平衡/滚动重启)、内存管理与落盘(spill to disk/OOM 防护)、用户自定义函数(executable UDF/SQL UDF/性能边界),并补齐 Projections 预聚合、trace_log 查询剖析、轻量删除更新、查询并发与资源隔离(workload scheduling)、MySQL/PostgreSQL 方言迁移、容量规划与成本优化等高级主题。

4 分钟阅读
ClickHouse OLAP 专题