数据库内核
从「会用 PostgreSQL」到「读得懂、还改得动它的源码」
适合谁:想往数据库内核方向走的人。默认你已经会写 SQL,没读过内核源码。
读完能做什么:走完这条线,你能独立读懂一条 SQL 在 PostgreSQL 里的完整轨迹,能定位一次 WAL 落盘的完整链路,能说清楚 MVCC 与锁的每一个落点。
阶段一览
| 阶段 | 主题 | 文章数 | 读完这一阶段,你该能做到 |
|---|---|---|---|
| L1 | 起步与全景 | 27 | 先知道它是什么、怎么跑起来、整体长什么样 —— 这一阶段不碰源码细节。 |
| L2 | 存储引擎:页、文件与内存 | 16 | 数据落在哪、怎么读进来、内存怎么分 —— 存储这一层的地基。 |
| L3 | 索引与查询管线 | 14 | 一条 SQL 从解析到执行,中间经过哪些层;索引为什么快。 |
| L4 | 事务、MVCC 与并发 | 11 | 隔离级别到底靠什么实现,行锁在哪一层加上去的。 |
| L5 | WAL、checkpoint 与恢复 | 14 | 一次提交落盘了什么,崩了以后怎么爬起来。 |
| L6 | 复制与高可用 | 21 | 备库怎么追主库、怎么切、复制槽是干什么的。 |
| L7 | 逻辑复制与流式(站内最厚的一块) | 81 | 把 WAL 变成一条可订阅的变更流:解码、重组、Apply、并行。 |
| L8 | 扩展、性能与生态 | 30 | 把内核之外的东西补齐:扩展怎么写、扩展生态里有哪些能打的、性能怎么观测和调,以及别的数据库长什么样。 |
L1 · 起步与全景
先知道它是什么、怎么跑起来、整体长什么样 —— 这一阶段不碰源码细节。
- 01 编译调试与代码布局 — 源码主线 / PostgreSQL
- 02 进程架构与生命周期 — 源码主线 / PostgreSQL
- pgsql架构 — 源码主线 / PostgreSQL
- pg编译运行 — 源码主线 / PostgreSQL
- initdb — 源码主线 / PostgreSQL
- pg_ctl — 源码主线 / PostgreSQL
- postgresql 启动流程 — 源码主线 / PostgreSQL
- postgresql基本操作与基本对象 — 源码主线 / PostgreSQL
- Postgres中postmaster代码解析(–boot和–single) — 源码主线 / PostgreSQL
- postgresql 源码编译 — 源码主线 / PostgreSQL
- code-server调试postgresql — 源码主线 / PostgreSQL
- postgresql源码阅读(一) — 源码主线 / PostgreSQL
- 使用meson编译pg — 源码主线 / PostgreSQL
- 数据库命名空间机制对比 — 源码主线 / PostgreSQL
- 多数据库模式命名空间问题 — 源码主线 / PostgreSQL
- 用 Meson 编译 PostgreSQL:从配置到回归测试的完整命令清单 — 源码主线 / PostgreSQL
- PostgreSQL 万能论:为什么一家公司可以用它替代 Kafka、Redis、Elastic 与 ClickHouse — 源码主线 / PostgreSQL
- 当我们在说”数据库”的时候,我们到底在说什么 —— 从用户的视角拆解 PostgreSQL 的能力与接口 — 源码主线 / PostgreSQL
- 选数据库的时候,我们究竟在选什么 —— 当基础能力都满足时,哪些维度让数据库”脱颖而出” — 源码主线 / PostgreSQL
- 为什么要对数据库进行细分:从 RDBMS 到 12 类专用数据库的全景图 — 源码主线 / PostgreSQL
- 从 `postgres` 二进制到生产级守护 —— PostgreSQL 最外层模块与启动全流程拆解 — 源码主线 / PostgreSQL
- PostgreSQL Background Worker 全解:从 RegisterBackgroundWorker 到 4 类逻辑复制 worker — 源码主线 / PostgreSQL
- PostgreSQL libpq 机制与缓冲区详解 — 源码主线 / PostgreSQL
- PostgreSQL 前世今生:从 1986 Berkeley 实验室到 2025 全球基础设施,一条开源数据库的 39 年演化史 — 源码主线 / PostgreSQL
- PostgreSQL 核心特性全景:12 大功能的设计动因、实现原理与版本演化 — 源码主线 / PostgreSQL
- 如何成为资深的 PostgreSQL 内核开发者:从 0 到 Committer 的 18 个月路线 + 36 个内核主题地图 + 12 大子系统架构 — 源码主线 / PostgreSQL
- PostgreSQL Schema 与 search_path:从名称解析源码到 DDL 对象归属 — 源码主线 / PostgreSQL
L2 · 存储引擎:页、文件与内存
数据落在哪、怎么读进来、内存怎么分 —— 存储这一层的地基。
- 04 存储抽象层 SMGR — 源码主线 / PostgreSQL
- 05 缓冲区管理 — 源码主线 / PostgreSQL
- pgsql之page — 源码主线 / PostgreSQL
- pg内存管理 — 源码主线 / PostgreSQL
- pgsql 存储管理 — 源码主线 / PostgreSQL
- pg_page — 源码主线 / PostgreSQL
- pg共享内存 — 源码主线 / PostgreSQL
- pg源码对象管理 — 源码主线 / PostgreSQL
- 干货 PostgreSQL数据表文件底层结构布局分析 - 知乎 — 源码主线 / PostgreSQL
- PosgreSQL FSM文件解析 – 蛋挞 — 源码主线 / PostgreSQL
- PostgreSQL 内存管理:一片共享内存,三座分配器,一座缓冲池 — 源码主线 / PostgreSQL
- PostgreSQL 共享内存机制:原理、使用与开发 — 源码主线 / PostgreSQL
- Linux 共享内存机制:从内核到主流项目实践 — 源码主线 / PostgreSQL
- PostgreSQL 元数据存储机制:从磁盘文件到内存缓存,`pg_class` 撑起的整个系统表体系 — 源码主线 / PostgreSQL
- PostgreSQL TOAST 机制源码级深度拆解:从 8KB 页面限制到 chunked 分散对齐 — 源码主线 / PostgreSQL
- PostgreSQL 目录快照源码级深度拆解:系统表读取的 MVCC 真相与失效机制 — 源码主线 / PostgreSQL
L3 · 索引与查询管线
一条 SQL 从解析到执行,中间经过哪些层;索引为什么快。
- 03 查询管线全景 — 源码主线 / PostgreSQL
- 07 B-Tree 索引 — 源码主线 / PostgreSQL
- insert data — 源码主线 / PostgreSQL
- stats — 源码主线 / PostgreSQL
- PostgreSQL的insert语句执行过程分析 - 墨天轮 — 源码主线 / PostgreSQL
- Postgresql 触发器详解 — 源码主线 / PostgreSQL
- pg常用函数 — 源码主线 / PostgreSQL
- PostgreSQL 分区表:从一行 `PARTITION BY` 到路由热路径的全链路拆解 — 源码主线 / PostgreSQL
- PostgreSQL vs SQL Server 分区表实战:步骤、场景与差异对比 — 源码主线 / PostgreSQL
- PostgreSQL 内核开发:读取一张表的 9 步标准流程与缓存全景 — 源码主线 / PostgreSQL
- PostgreSQL 18 内核数据结构全景:RangeVar 与 20+ 个核心数据结构源码级拆解 — 源码主线 / PostgreSQL
- PostgreSQL syscache 模块源码深度拆解:CatCache 数据结构、LRU 哈希表、cache invalidation 全链路 — 源码主线 / PostgreSQL
- PostgreSQL 读一行数据源码级深度拆解:MVCC 在每个环节的落点 — 源码主线 / PostgreSQL
- PostgreSQL 逻辑复制 Stream 执行逻辑源码级拆解:从 reorderbuffer 触发到订阅端落盘回放 — 源码主线 / PostgreSQL
L4 · 事务、MVCC 与并发
隔离级别到底靠什么实现,行锁在哪一层加上去的。
- 06 堆表与 MVCC — 源码主线 / PostgreSQL
- 08 事务、锁与并发 — 源码主线 / PostgreSQL
- PostgreSQL MVCC:一条数据是如何拥有”分身术”的 — 源码主线 / PostgreSQL
- PostgreSQL 事务:一次 BEGIN 与 COMMIT 背后的双层世界 — 源码主线 / PostgreSQL
- PostgreSQL 18 并行 Worker 机制全解:从 `ParallelContext` 到 `ParallelQueryMain` 的全链路 — 源码主线 / PostgreSQL
- PostgreSQL 行锁机制深度解析:从 MVCC 到多级锁的完整链路 — 源码主线 / PostgreSQL
- PostgreSQL Latch 机制详解:从一行 SetLatch 到 epoll 的内核之旅 — 源码主线 / PostgreSQL
- PostgreSQL 逻辑复制里 `RUNNING_XACTS` 写入机制与快照 `xmin / xmax / xip` 的演化:源码级深度拆解 — 源码主线 / PostgreSQL
- PostgreSQL 行锁机制源码级深度拆解:4 种锁模式 + xmax + MultiXact 的完整链路 — 源码主线 / PostgreSQL
- 一个 64 位计数器,决定所有事务的提交顺序 — 视频
- 两个事务改同一行,谁先谁后 — 视频
L5 · WAL、checkpoint 与恢复
一次提交落盘了什么,崩了以后怎么爬起来。
- 09 WAL 与恢复 — 源码主线 / PostgreSQL
- 11 崩溃恢复深入 — 源码主线 / PostgreSQL
- BgWriter — 源码主线 / PostgreSQL
- WalWriter — 源码主线 / PostgreSQL
- checkpoint — 源码主线 / PostgreSQL
- pg_checksum — 源码主线 / PostgreSQL
- xlog — 源码主线 / PostgreSQL
- 数据库数据完整性问题(块折断) — 源码主线 / PostgreSQL
- PostgreSQL Checkpoint 机制浅析 — 源码主线 / PostgreSQL
- wal机制浅析 — 源码主线 / PostgreSQL
- 数据库崩溃恢复 — 源码主线 / PostgreSQL
- PostgreSQL 时间线解析 — 源码主线 / PostgreSQL
- PostgreSQL WAL 记录类型完全指南:21 个 RMGR × 80+ 种记录的源码级拆解 — 源码主线 / PostgreSQL
- WAL 里的顺序,不等于事务的顺序 — 视频
L6 · 复制与高可用
备库怎么追主库、怎么切、复制槽是干什么的。
- 12 物理复制深入 — 源码主线 / PostgreSQL
- repmgr — 源码主线 / PostgreSQL
- pg_replication — 源码主线 / PostgreSQL
- pg_logical_decode — 源码主线 / PostgreSQL
- pg_slot — 源码主线 / PostgreSQL
- pg_walsender — 源码主线 / PostgreSQL
- 流复制心跳超时问题 — 源码主线 / PostgreSQL
- pg_walreceiver — 源码主线 / PostgreSQL
- repmgr搭建集群 — 源码主线 / PostgreSQL
- PostgreSQL 同步流复制原理和代码浅析-阿里云开发者社区 — 源码主线 / PostgreSQL
- PostgreSQL 流复制:WalReceiver 与 startup 进程的交互逻辑 — 源码主线 / PostgreSQL
- PostgreSQL的后台进程walsender分析 - 关系型数据库 - 亿速云 — 源码主线 / PostgreSQL
- tcpdump -i eth1 -s0 -nnX -w startup_trust.cap — 源码主线 / PostgreSQL
- postgresql流复制同异步分析 — 源码主线 / PostgreSQL
- 详解完整恢复及基于时间点的恢复 — 源码主线 / PostgreSQL
- - 连接设置 Connection Settings - — 源码主线 / PostgreSQL
- repmgr实现原理 — 源码主线 / PostgreSQL
- docker搭建Postgresql主备集群 — 源码主线 / PostgreSQL
- PostgreSQL存储、索引及系统优化、主备切换 — 源码主线 / PostgreSQL
- PostgreSQL复制槽实操 — 源码主线 / PostgreSQL
- PostgreSQL CREATE_REPLICATION_SLOT 端到端源码分析:从 SQL 到 snapbuild 状态机的完整链路(每个函数每个参数) — 源码主线 / PostgreSQL
L7 · 逻辑复制与流式(站内最厚的一块)
把 WAL 变成一条可订阅的变更流:解码、重组、Apply、并行。
- 13 逻辑复制深入 — 源码主线 / PostgreSQL
- 逻辑解码 — 源码主线 / PostgreSQL
- DDL — 源码主线 / PostgreSQL
- ai逻辑解码 — 源码主线 / PostgreSQL
- pglogical详解 — 源码主线 / PostgreSQL
- polardb逻辑解码 — 源码主线 / PostgreSQL
- 逻辑解码支持DDL — 源码主线 / PostgreSQL
- pg15逻辑复制支持DDL — 源码主线 / PostgreSQL
- pglogical.so详解 — 源码主线 / PostgreSQL
- pglogical支持DDL搭建 — 源码主线 / PostgreSQL
- 逻辑复制支持DDL需求分析 — 源码主线 / PostgreSQL
- PostgreSQL `LogLogicalMessage` — 源码主线 / PostgreSQL
- 逻辑复制DDL支持详细设计方案 — 源码主线 / PostgreSQL
- 一、结论(先说清楚) — 源码主线 / PostgreSQL
- 1. 设计选择 — 源码主线 / PostgreSQL
- 逻辑复制支持DDLAI提示词 — 源码主线 / PostgreSQL
- 逻辑复制支持DDL概要设计 — 源码主线 / PostgreSQL
- 逻辑复制支持ddl ai配置流程 — 源码主线 / PostgreSQL
- PostgreSQL 15 逻辑复制操作流程详解 — 源码主线 / PostgreSQL
- 指定列同步对逻辑复制支持DDL的影响 — 源码主线 / PostgreSQL
- 支持ddl评审相关问题 — 源码主线 / PostgreSQL
- 逻辑复制源码分析 — 源码主线 / PostgreSQL
- 逻辑复制解惑 — 源码主线 / PostgreSQL
- PostgreSQL 逻辑复制支持系统表同步详细设计文档 — 源码主线 / PostgreSQL
- 逻辑复制支持同步系统表概要设计 — 源码主线 / PostgreSQL
- ddl同步架构 — 源码主线 / PostgreSQL
- Babelfish DDL 同步已知限制与客户使用建议 — 源码主线 / PostgreSQL
- sqlserver模式逻辑复制支持ddl — 源码主线 / PostgreSQL
- SQLServer模式逻辑复制DDL支持 - 架构分析 — 源码主线 / PostgreSQL
- 内核执行 Babelfish 上下文需要考虑的问题 — 源码主线 / PostgreSQL
- 支持逻辑复制同步 DDL 适配 SQL Server 方案 — 源码主线 / PostgreSQL
- 逻辑复制同步ddl适配bbf面临的挑战 — 源码主线 / PostgreSQL
- 逻辑复制系统表支持DDL实现问题 — 源码主线 / PostgreSQL
- 逻辑解码ddl replay支持sqlserver模式 — 源码主线 / PostgreSQL
- 逻辑复制适配sqlserver模式分区表问题分析 — 源码主线 / PostgreSQL
- postgresql逻辑复制(DML) — 源码主线 / PostgreSQL
- 逻辑解码DDL Replay框架设计 — 源码主线 / PostgreSQL
- DDL同步架构(美化版) — 源码主线 / PostgreSQL
- PostgreSQL 逻辑复制订阅参数全解:从 run_as_owner 到 disable_on_error — 源码主线 / PostgreSQL
- PostgreSQL 逻辑复制与分区表:从 publisher 到 partition leaf 的全链路 — 源码主线 / PostgreSQL
- PostgreSQL 逻辑复制的 Worker 模型:一个 apply worker 撑全场,分区表也一样 — 源码主线 / PostgreSQL
- PostgreSQL 逻辑复制:DDL 同步后如何启动 apply worker 同步 DML(分区表专题) — 源码主线 / PostgreSQL
- PostgreSQL 逻辑复制下分区表的 INSERT:从 publisher 到 leaf 的完整时序 — 源码主线 / PostgreSQL
- PostgreSQL 逻辑复制:`publish_via_partition_root` 的完整行为分析 — 源码主线 / PostgreSQL
- PostgreSQL 逻辑复制表的生命周期:从 `pg_replication_slots` 到 `pg_subscription_rel` 的全景图 — 源码主线 / PostgreSQL
- PostgreSQL 逻辑复制 streaming 与 spill:从 reorderbuffer 到 .changes 文件的全程真相 — 源码主线 / PostgreSQL
- PostgreSQL 逻辑复制 spill 文件深度剖析:从 `xid-*.spill` 到 TPC-C 的增长方程 — 源码主线 / PostgreSQL
- PostgreSQL 逻辑复制的监控:六张视图 + 一组可执行 SQL,把 publisher/subscriber 的速率与健康度彻底看透 — 源码主线 / PostgreSQL
- PostgreSQL 逻辑复制的 ReorderBuffer 与事务机制:从一行 WAL 到一致性变更流的全链路绑定 — 源码主线 / PostgreSQL
- PostgreSQL 逻辑复制支持 DDL 之后:DDL 与 DML 的时序难题(重点:分区表) — 源码主线 / PostgreSQL
- PostgreSQL 逻辑复制集群搭建指北:基于 Docker 的 publisher + subscriber 一键拉起 — 源码主线 / PostgreSQL
- PostgreSQL 逻辑复制性能与速率测试:从一个公开的”没有”讲起 — 源码主线 / PostgreSQL
- PostgreSQL 18 逻辑复制的并行解码与并行 Apply:源码全景 — 源码主线 / PostgreSQL
- TWPA 依赖冲突检测设计文档 — 源码主线 / PostgreSQL
- 逻辑复制并行 Apply 用户接口文档 — 源码主线 / PostgreSQL
- TWPA 概要设计文档 — 源码主线 / PostgreSQL
- PostgreSQL 逻辑复制 Apply Parallel Worker 运行机制深度解析 — 源码主线 / PostgreSQL
- PostgreSQL 逻辑复制 Apply Parallel Worker 参数调优实战 — 源码主线 / PostgreSQL
- 从内核开发者视角,在 PostgreSQL 18 逻辑复制中新增一个 GUC 参数 — 源码主线 / PostgreSQL
- PostgreSQL 18 流式逻辑复制发布端深度解析:从 logical_decoding_work_mem 到 stream_commit 的完整链路 — 源码主线 / PostgreSQL
- Apply Parallel Worker 的 lock_stream 与 unlock_stream:为什么”获得就释放”的死锁防护机制 — 源码主线 / PostgreSQL
- applyparallelworker.c 源码深度解析:1646 行代码的完整结构与模块协作 — 源码主线 / PostgreSQL
- applyparallelworker.c 之 LA 端源码深度解析:Leader Apply Worker 的指挥中枢 — 源码主线 / PostgreSQL
- reorderbuffer.c 源码深度解析:PostgreSQL 逻辑复制的”事务重组引擎 — 源码主线 / PostgreSQL
- PostgreSQL 逻辑复制全链路:以一个真实事务为例,从 `INSERT` 到 `apply` 的源码级旅程 — 源码主线 / PostgreSQL
- PostgreSQL snapbuild.c 深度解析:逻辑复制”目录快照”子系统全栈拆解 — 源码主线 / PostgreSQL
- PostgreSQL 逻辑复制端到端深度拆解:从 WAL 字节到订阅者 apply 的全链路源码分析 — 源码主线 / PostgreSQL
- PostgreSQL SnapBuildFindSnapshot 深度拆解:每条状态转换路径的具体 WAL 日志与前提条件 — 源码主线 / PostgreSQL
- PostgreSQL 逻辑复制 LSN 推进全景:从 WAL 字节到订阅者 apply 的全链路 LSN 视角 — 源码主线 / PostgreSQL
- openGauss 并行解码设计原理深度拆解:reader + 多 worker + CSN 三层架构的源码级剖析 — 源码主线 / PostgreSQL
- openGauss 通过 CSN 保证全序的源码级深度分析:从 nextCommitSeqNo 原子计数到订阅端 CSN 校验 — 源码主线 / PostgreSQL
- PostgreSQL 逻辑复制:catalog 改动、可见性判定与 xmin/xmax 推进全景 — 源码主线 / PostgreSQL
- PostgreSQL reorderbuffer.c 函数级源码全集:5615 行 / 95 个函数的逐函数解析 — 源码主线 / PostgreSQL
- pgoutput_change 到 HeapTupleSatisfiesVisibility 的函数调用栈分析 — 源码主线 / PostgreSQL
- 逻辑复制发布端现状 — 源码主线 / PostgreSQL
- PostgreSQL 18 并行逻辑解码 — 视频
- 概要设计说明书(逻辑复制并行解码) — 源码主线 / PostgreSQL
- PostgreSQL 18 逻辑复制并行解码概要设计说明书 — 源码主线 / PostgreSQL
- PostgreSQL Logical Replication Benchmark Suite — 源码主线 / PostgreSQL
- 并行接收之后,谁先应用 — 视频
- 为什么 DDL 同步不能直接把 SQL 文本发过去 — 视频
L8 · 扩展、性能与生态
把内核之外的东西补齐:扩展怎么写、扩展生态里有哪些能打的、性能怎么观测和调,以及别的数据库长什么样。
- 10 进阶特性 — 源码主线 / PostgreSQL
- 14 列存与 cstore_fdw — 源码主线 / PostgreSQL
- pg扩展开发 — 源码主线 / PostgreSQL
- pg_io_调优 — 源码主线 / PostgreSQL
- sql_test — 源码主线 / PostgreSQL
- taosd基本使用 — 源码主线 / PostgreSQL
- polardb竞争力分析 — 源码主线 / PostgreSQL
- 安装mysql — 源码主线 / PostgreSQL
- BenchmarkSQL 使用教程:从配置到运行机制分析 — 源码主线 / PostgreSQL
- 真希望有人早点告诉我的 Postgres 经验 — 源码主线 / PostgreSQL
- PostgreSQL “Don’t Do This” 完整中文版 — 源码主线 / PostgreSQL
- pgbench 源码全解:一个 C 文件如何撑起 PostgreSQL 官方压测工具 — 源码主线 / PostgreSQL
- PostgreSQL 逻辑复制性能分析:火焰图实战 — 源码主线 / PostgreSQL
- 火焰图怎么看:从一张图到优化方向的完整方法论 — 源码主线 / PostgreSQL
- PostgreSQL 18 Injection Point 完整指南:原理、API 与实战 — 源码主线 / PostgreSQL
- 用 Injection Point 测试无法到达的代码路径:3 种改造模式 + 实战 — 源码主线 / PostgreSQL
- Injection Point 与 PG 测试框架集成实战:从 Makefile 到 .spec 完整链路 — 源码主线 / PostgreSQL
- PostGIS 深度解析:从 OGC Simple Features 到 PG 18 时代的 GIS 引擎 — 源码主线 / PostgreSQL
- pgvector 深度解析:从 ANN 索引到 RAG 时代的向量数据库核心 — 源码主线 / PostgreSQL
- TimescaleDB 深度解析:从时间分区到列存压缩的 PG 时序数据库扩展 — 源码主线 / PostgreSQL
- Citus 深度解析:从分布式 SQL 到列存扩展的 PG 集群引擎 — 源码主线 / PostgreSQL
- pg_stat_statements 深度解析:从 query hash 到 pg_stat_* 生态的查询统计扩展 — 源码主线 / PostgreSQL
- pgAudit 深度解析:从 log_statement 到 PG 审计标准的合规扩展 — 源码主线 / PostgreSQL
- pgcrypto 深度解析:从 md5 到 OpenSSL 集成的 PG 加密扩展 — 源码主线 / PostgreSQL
- pgBackRest 深度解析:从 pg_basebackup 到企业级备份恢复的 Go 实现 — 源码主线 / PostgreSQL
- cstore_fdw 深度解析:从 Hydra 到 Citus Columnar 的列存 FDW 鼻祖 — 源码主线 / PostgreSQL
- Citus Columnar 深度解析:从 cstore_fdw 到 Table AM 的 PG 原生列存扩展 — 源码主线 / PostgreSQL
- TimescaleDB Columnstore(hypercore)深度解析:时序列存压缩的 hybrid engine — 源码主线 / PostgreSQL
- pg_duckdb 深度解析:从 OLTP 到 OLAP hybrid query 的 DuckDB 内嵌扩展 — 源码主线 / PostgreSQL
- PostgreSQL 社区精髓资源汇总:从官方文档到内核贡献者博客的”一键直达”清单 — 源码主线 / PostgreSQL