Syngnat
|
2bdbdc9382
|
🐛 fix(sync): 修复分页比对与 DDL 字面量缺反斜杠转义导致的错删行与语法错误 DDL
- quoteSyncSQLString 改为方言感知：新增 syncDialectEscapesBackslash，对 mysql/mariadb/
clickhouse/tdengine/starrocks/diros/oceanbase 先翻倍反斜杠再翻倍单引号；postgres 系、
sqlserver、sqlite、duckdb 保持原样（翻倍反而会写入两个反斜杠并损坏比对）
- 含反斜杠的主键原先在 IN 列表里被目标库解释成别的字符串，导致源端存在的行先被判为插入、
反查时又匹配不到而被判为删除并真的从目标删掉，最终 Success=true 但目标永久缺行
- dbType 逐层传入 formatSyncSQLLiteral 的 3 个调用点：buildPKInSelectQuery、
buildKeysetPagedTableQuery、buildSourceQueryPKInSelectSQL
- escapeMySQLStringLiteral 同类修复：列注释与 DEFAULT 值内联进 MySQL/ClickHouse DDL 时，
以反斜杠结尾的注释会让 COMMENT '...\' 吞掉闭合引号并生成语法错误的 DDL
- 补 5 项回归测试，方言分组做双向断言（漏加与误加都会失败）
|
2026-07-26 20:19:29 +08:00 |
|
Syngnat
|
01c3c2f9c9
|
🐛 fix(sync): 修复 SQL 结果集全量覆盖先清空目标表导致的数据不可恢复丢失
- 加自表守卫：源查询是任意 SQL、无法可靠判断是否引用目标表，故抽出 isSameSyncEndpoint
做端点级比较，源与目标同端点时退回非分页路径（该路径先把源行读入内存再清空，语义安全）。
分页叠加自表覆盖本质不可行：清空后的分页会读到空表，目标最终只剩第一页数据
- 改为先读首页、成功后才清空目标，与 tryApplyDirectImportInPages 保持一致。
原顺序先 TRUNCATE 再首读，源查询一旦报错就留下被清空且无法恢复的目标表
（TRUNCATE 在 MySQL 上是 DDL、隐式提交不可回滚），而函数还把读到 0 行当作同步成功
- isSamePhysicalSyncTable 改为复用 isSameSyncEndpoint，表名比较语义不变
- 补 4 项回归测试：端点比较、表名语义不变、自表退回且退回前未清空、先读后清顺序
|
2026-07-26 20:11:52 +08:00 |
|
Syngnat
|
5ab50db51c
|
⚡️ perf(sync): 优化大表同步分页与批量写入
- 同步分析和预览改为分页扫描差异，避免一次性加载源表和目标表
- 直接导入与源查询同步支持分页读取和分批提交，降低低内存机器 OOM 风险
- 各数据库 ApplyChanges 统一使用参数化批量 INSERT，减少大表同步 SQL 超时
- MySQL 批量写入按行数和参数数量拆分，兼容超宽表场景
- 补充批量插入、分页差异和源查询同步回归测试
|
2026-05-26 08:27:15 +08:00 |
|