LVM 与 RAID 存储管理：卷管理、快照与软阵列运维
深入 Linux LVM 与 RAID 存储管理：PV/VG/LV 三层抽象、在线扩容缩容、经典快照与 thin 快照、精简池与 over-provisioning、lvmcache SSD 加速、mdadm 软 RAID 级别与 chunk 选择、坏盘替换与扩容、scrub 校验与故障恢复实战。
tag
存储
共 16 篇文章。
40. 存储系统与 RAID 原理
从存储层次与磁盘、SSD 的物理特性出发，讲清寻道与旋转延迟、FTL、写放大与磨损均衡，系统梳理 RAID 0/1/5/6/10 的数据布局与容错模型、奇偶校验与重建、写惩罚与写洞，并延伸到可靠性建模、4K 对齐、页缓存与块层存储栈，最后对比分布式存储的副本与纠删码并讨论 SSD 时代的 RAID 取舍。
列式数据格式：Parquet、ORC 与 Arrow 的原理与选型
系统讲解列式数据格式：行存与列存的访问模式差异、Parquet 的 row group/column chunk/page 三层结构、字典与 RLE 编码、按列压缩、谓词下推与统计信息、ORC 对比、Arrow 内存格式与零拷贝、小文件与分区问题，以及数据湖场景的选型决策。
Nginx 大文件上传与请求体处理：缓冲、临时文件与断点续传
讲解 Nginx 处理大请求体的完整机制，涵盖 client_max_body_size 的分层设置、client_body_buffer_size 与临时文件落盘、proxy_request_buffering 的取舍、超时联动、断点续传与直传对象存储方案，以及 413 错误的排查方法。
科学数据格式与并行 IO 栈：HDF5、NetCDF 与 ADIOS2
在百亿亿次级超算上，IO 往往比计算更早撞墙。本文系统讲解并行 IO 栈：HDF5 的数据模型与并行 HDF5、NetCDF-4 与 CF 约定、ADIOS2 的引擎抽象与 BP5、MPI-IO 与 ROMIO 的集合 IO 与两阶段算法、数据布局与访问模式优化、检查点与容错 IO，以及一套可量化的调优方法。
冷热数据分层与归档
讲解冷热数据识别方法、归档策略设计、基于分区的秒级归档、历史库建设与查询路由，以及归档过程中的校验与可回溯性保障。
Kafka 存储内核：日志段、留存策略与日志压缩
系统讲解 Kafka 存储内核：日志段（LogSegment）与索引文件（.log/.index/.timeindex）、追加写入与刷盘策略、日志留存策略（时间/大小/segment 删除与合并）、Compact 主题与日志压缩（墓碑消息/清除点/压缩线程）、分层存储（Tiered Storage）、以及存储调优与磁盘故障排查的工程实践
列式压缩算法深入：LZ4/ZSTD、Delta/Gorilla 编解码与压缩率调优
系统讲解 ClickHouse 列式存储的压缩原理：通用压缩 LZ4/ZSTD 的对比与权衡、专用编解码器（Delta/DoubleDelta/Gorilla）如何针对数据类型优化、压缩率与查询性能的平衡、编解码器选择矩阵（时间戳/数值/字符串/浮点）、压缩率监控与调优实践。
Zig 数据存储实战：SQLite 绑定与嵌入式数据库
SQLite 是嵌入式数据库的事实标准，Zig 通过 C ABI 无缝调用 sqlite3。本文系统讲解 @cImport 绑定、数据库打开与初始化、参数绑定与预编译语句、结果集遍历、事务与 WAL 模式、连接与分配器生命周期，以及把查询结果映射到 Zig 结构体的工程实践。
NixOS 存储与文件系统：分区、LVM、Btrfs 与磁盘管理
NixOS 存储管理实战：磁盘分区与挂载、swap 配置、LVM 逻辑卷、Btrfs 子卷/快照/压缩、ZFS 集成、挂载选项与 fstab 声明式管理、磁盘配额与监控、故障恢复。
Mutation 与 TTL 深入：轻量删除、变更机制与数据生命周期
系统讲解 ClickHouse 的数据变更与生命周期：ALTER UPDATE/DELETE 的 mutation 机制（异步重写 Part 的代价）、轻量删除（Lightweight Delete）与突变掩码、TTL 的列级/行级/分区级应用、TTL 存储策略（冷热分层）、mutation 对查询与合并的影响，以及大规模清理数据的最佳实践。
Linux 高级文件系统：XFS、Btrfs、ZFS 与存储进阶
Linux 文件系统进阶：ext4 之外的三强对比（XFS 大文件高性能、Btrfs 快照子卷压缩、ZFS 校验池化），挂载选项调优、配额、SSD/Trim、快照与回滚、scrub 与故障恢复。
NVMe 存储栈深入：PCIe 队列对、多队列调度与 io_uring 的结合
NVMe 通过 PCIe 直连与高深度的多队列把闪存盘的随机 IO 性能推向数百万级 IOPS，但这要求整条存储栈——从驱动队列、块层 blk-mq、IO 调度器到用户态 io_uring——都以极低延迟协作。本文从 PCIe 事务与队列对模型讲起，深入 NVMe 多队列映射、blk-mq 与 IO 调度器，再剖析 io_uring 与 NVMe 结合后的轮询与内核绕过路径，最后给出生产环境压测与调优清单。
文件系统原理：inode、目录结构与 VFS 抽象层
文件系统是操作系统中最关键的子系统之一。它将裸设备的物理存储块（block）抽象为逻辑上的目录和文件，让用户和应用程序可以方便地组织、读取和写入数据。理解文件系统的底层原理，对于排查磁盘空间泄漏、IO 性能瓶颈和数据一致性问题都至关重要。
Linux IO 栈深度解析：从 VFS 到块设备
存储 IO 是操作系统中最复杂也最影响性能的子系统之一。一次看似简单的文件读写，实际上会穿越用户空间、虚拟文件系统、页缓存、块层、设备驱动直至物理硬件多个层级。理解 Linux IO 栈的完整路径，是诊断性能瓶颈、优化数据库响应、以及合理选型存储方案的前提。
分布式文件存储：MinIO、阿里云 OSS 与 Spring 集成实战
掌握对象存储在 Java 企业级应用中的最佳实践，涵盖 MinIO 私有化部署、阿里云 OSS SDK、断点续传、预签名 URL 与安全策略