技术·学习·实践·人生·哲学
山是山,水是水;山不是山,水不是水;山还是山,水还是水
07
03
03
03
逻辑复制支持同步系统表概要设计 逻辑复制支持同步系统表概要设计
下面给你一份基于 PG18 的“逻辑复制支持系统表同步”完整设计文档(可直接用于研发/评审)。我会严格结合你前面分析的源码链路来设计,重点保证: 不破坏 PostgreSQL 现有逻辑复制架构 可控扩展(白名单机制) 具备产品化
2026-07-03 growdu
03
Babelfish DDL 同步已知限制与客户使用建议 Babelfish DDL 同步已知限制与客户使用建议
本文档汇总 Babelfish 插件在 SQL Server 模式下使用逻辑复制 DDL 自动同步时的已知限制,并按客户使用影响给出分级和建议做法。 这些限制主要来自 Babelfish 对 T-SQL DDL 的解析、重写和执行路径约束,
2026-07-03 growdu
03
sqlserver模式逻辑复制支持ddl sqlserver模式逻辑复制支持ddl
背景现状当前数据库使用babelfish插件(bbf)来支持sqlserver模式,bbf采用双端口的设计:即数据库在启动时会监听多个端口,一般是pg原生的端口和tsql端口,比如5432和1433. sqlserver模式的sql就走14
2026-07-03 growdu
03
03
03
逻辑复制同步ddl适配bbf面临的挑战 逻辑复制同步ddl适配bbf面临的挑战
1.当前产品面向比亚迪现场,现场需要sqlserver模式,当前sqlserver模式下的逻辑复制能力范围边界尚不清楚;(从产品和架构层面出发评估) 当前默认和PG的能力一致,但是实际的测试结果发现,有一些能力不满足,比如copy da
2026-07-03 growdu
03
04
14
PostgreSQL `LogLogicalMessage` PostgreSQL `LogLogicalMessage`
1. 文档目标本文面向需要理解 PostgreSQL 逻辑复制/逻辑解码链路的开发人员,解释 LogLogicalMessage 的定位、内部实现、设计初衷和工程使用方式。 它不是普通 DML WAL,也不是 SQL 级逻辑复制协
2026-04-14 growdu
14
PostgreSQL 15 逻辑复制操作流程详解 PostgreSQL 15 逻辑复制操作流程详解
概述本文通过实际操作演示 PostgreSQL 15 逻辑复制的完整流程,重点展示: WAL(Write-Ahead Logging)日志的生成与解析 LSN(Log Sequence Number)的推进机制 事务(Transactio
2026-04-14 growdu
14
指定列同步对逻辑复制支持DDL的影响 指定列同步对逻辑复制支持DDL的影响
背景分析在逻辑复制支持DDL的需求分析中,需要考虑如下场景: 逻辑复制支持同步指定列,当配置了同步指定列,又开启了ddl=table的时候,其行为预期可能有如下情况:1.订阅端的ddl是同步完整的表结构,还是只同步指定的列;2.订
2026-04-14 growdu
14
支持ddl评审相关问题 支持ddl评审相关问题
需求 一个DDL需要多个事务,比如在线建分区; 性能问题;(发布性能较低,流式发布) 用户接口跟产品确认;(用户接口清单,ddl同步范围),table和others的清单列出; publication决定发布什么,subscription决
2026-04-14 growdu
14
逻辑复制源码分析 逻辑复制源码分析
发送方逻辑复制与物理复制使用相同的发送框架,都在walsender中进行发送。整体流程大致如下: 交换系统信息,校验身份; identify system 创建复制槽; create slot start replication; 启动了
2026-04-14 growdu
14
逻辑复制解惑 逻辑复制解惑
在初次写入数据的时候,ddl写到了系统表,dml先写入日志,然后apply成数据。当前逻辑复制的原理是根据lsn读取wal日志,将wal日志decode成sql,然后发送目标端。 因而类推到ddl,也是同样的,需要先读取ddl,将ddl记录
2026-04-14 growdu
14
逻辑复制DDL支持详细设计方案 逻辑复制DDL支持详细设计方案
设计背景与目标逻辑复制当前仅支持同步DML操作。为了提升用户使用体验和增强逻辑复制功能,需要扩展支持DDL(数据定义语言)的自动同步。 需求概述Publication语法扩展原有接口: CREATE PUBLICATION name
2026-04-14 growdu
14
一、结论(先说清楚) 一、结论(先说清楚)
这个问题非常关键,而且是内核方案必须回答清楚的两个核心风险: 1️⃣ 会不会导致 WAL 暴增2️⃣ 会不会破坏 WAL 兼容性 我分别给你结论 + 原理 + 定量判断 + 风险控制方案。 ✅ 1. WAL 不会“失控暴增”,但会可控
2026-04-14 growdu
14
1. 设计选择 1. 设计选择
可以,下面我直接给你一版接近 PostgreSQL patch 风格的 LogLogicalDDLMessage() 实现草稿。它的设计核心是:复用 PostgreSQL 现有 generic logical decoding messag
2026-04-14 growdu
14
逻辑复制支持DDLAI提示词 逻辑复制支持DDLAI提示词
需求逻辑复制需要支持自动同步DDL。 逻辑复制当前仅支持同步DML,为了提升用户使用体验和增强逻辑同步功能。 publication原来的publication用户接口: CREATE PUBLICATION name [ FOR
2026-04-14 growdu
14
逻辑复制支持DDL概要设计 逻辑复制支持DDL概要设计
1. 背景与目标PostgreSQL 当前内建逻辑复制主要覆盖表级 DML 复制。logical decoding 的本质是从 WAL 中提取持久化变更,转成更高层可理解的变更流;复制槽保证“按源端发生顺序”向客户端提供变化序列。(Post
2026-04-14 growdu
03
11
claude安装教程 claude安装教程
安装claude当前openclaw(龙虾)比较火,但是配置比较复杂,可以先安装claude进行体验。 Windows 10/11 或 Linux/macOS(Windows 需要额外安装 Git bash, 后续所有命
2026-03-11 growdu
11
pg常用函数 pg常用函数
DefineCustom*Variable在 PostgreSQL 扩展开发中,DefineCustom*Variable 系列函数用于 注册自定义 GUC(Grand Unified Configuration)参数。 DefineCus
2026-03-11 growdu
11
pg15逻辑复制支持DDL pg15逻辑复制支持DDL
如果你的目标是: 在 PostgreSQL 15 的原生逻辑复制框架(CREATE PUBLICATION / CREATE SUBSCRIPTION)基础上,扩展支持 DDL 复制,并在 SQL 接口层增加 ddl 选项,同时
2026-03-11 growdu
11
pglogical.so详解 pglogical.so详解
pglogical.so是pglogical中的数据库扩展(extension),负责管理复制拓扑、节点、replication set、apply worker 等控制逻辑。 pglogical.so是控制层,用于管理逻辑复制。 它和普通
2026-03-11 growdu
11
pglogical支持DDL搭建 pglogical支持DDL搭建
编译数据库和pglogical插件git clone https://git.postgresql.org/git/postgresql.git cd postgresql git checkout
2026-03-11 growdu
11
逻辑复制支持DDL需求分析 逻辑复制支持DDL需求分析
需求内容postgresql当前的逻辑复制仅支持复制DML,不支持复制DDL,需要手动在目标端执行DDL。 为提升用户使用体验,需要实现逻辑复制支持DDL自动同步。 要达到的主要目的:同一个数据库对象的DDL语句不需要在每个目标端都执行一次
2026-03-11 growdu
06
DDL DDL
数据定义语言(DDL)是SQL(结构化查询语言)的一部分,它用于定义、管理和控制数据库的结构和元素。 DDL允许数据库管理员、开发人员和其他用户创建、修改和删除数据库对象,如表、索引、视图等。 数据定义语言(DDL)是SQL的一个子集,主要
2026-03-06 growdu
06
ai逻辑解码 ai逻辑解码
基于对PolarDB源码和PostgreSQL LogLogicalMessage 机制的分析,以下是DDL自动传输的实现原理详解: LogLogicalMessage核心机制回顾
2026-03-06 growdu
06
pglogical详解 pglogical详解
pglogical 是 PostgreSQL 的拓展模块, 为 PostgreSQL 数据库提供了逻辑流复制发布和订阅的功能。 逻辑复制是将数据重新执行一次insert、update或delete。pglogical就是逻辑复制的其中一种实
2026-03-06 growdu
8 / 9