迁移校验、切换与回退¶
比较源与目标时先固定同一个一致性边界。两个系统边写边查,数值相同或不同都可能只是采样时间差,不能据此认证完整迁移。
校验分层¶
层次 |
检查 |
|---|---|
对象 |
表、字段、类型/精度/默认值、主键/唯一性/外键、视图/过程、权限与应用 SQL |
键集 |
分片/主键范围,源缺失、目标额外、重复业务键,不只比较总行数 |
关键值 |
NULL 与空串、精确数值、Unicode/原始字节、时间与偏移、状态/水位 |
汇总与内容 |
金额/计数按业务维度,规范化后的分片摘要,异常范围逐行比较 |
业务 |
实际查询/事务、认证、排序规则、索引、后台作业和外部依赖 |
跨数据库不要直接比较各自厂商的 CHECKSUM 或默认字符串表示。定义共同序列化:列顺序、明确的 NULL 标记、数值精度、UTC/原偏移策略、字符编码、二进制编码与稳定排序。无主键表需额外设计可重现的比较键或分片方案。
行数相同但数据错误的负对照¶
下面在 MO 内使用两张夹具表模拟源/目标比较;它是校验方法实验,不是外部源迁移或 CDC 测试。故意修改一笔金额,总行数仍是 2/2,但差异数为 1。
CREATE DATABASE mo_migration_validation_lab;
USE mo_migration_validation_lab;
CREATE TABLE source_fixture(id INT PRIMARY KEY, amount DECIMAL(20,4), note VARCHAR(30));
CREATE TABLE target_fixture(id INT PRIMARY KEY, amount DECIMAL(20,4), note VARCHAR(30));
INSERT INTO source_fixture VALUES(1,10.2500,NULL),(2,20.5000,'');
INSERT INTO target_fixture SELECT * FROM source_fixture;
UPDATE target_fixture SET amount=99 WHERE id=2;
-- Expected-Values: 2, 2
SELECT (SELECT COUNT(*) FROM source_fixture) AS source_count,
(SELECT COUNT(*) FROM target_fixture) AS target_count;
-- Expected-Value: 1
SELECT COUNT(*) AS different_rows
FROM source_fixture s JOIN target_fixture t ON s.id=t.id
WHERE NOT(s.amount <=> t.amount) OR NOT(s.note <=> t.note);
-- Expected-Value: 0
SELECT COUNT(*) AS missing_rows
FROM source_fixture s LEFT JOIN target_fixture t ON s.id=t.id WHERE t.id IS NULL;
-- Expected-Value: 0
SELECT COUNT(*) AS extra_rows
FROM target_fixture t LEFT JOIN source_fixture s ON t.id=s.id WHERE s.id IS NULL;
UPDATE target_fixture SET amount=20.5000 WHERE id=2;
-- Expected-Value: 0
SELECT COUNT(*) FROM source_fixture s JOIN target_fixture t ON s.id=t.id
WHERE NOT(s.amount <=> t.amount) OR NOT(s.note <=> t.note);
DROP DATABASE mo_migration_validation_lab;
修复金额后差异数为 0。生产环境按主键范围分片,并同时检查缺失/额外键和关键字段;不要仅凭金额总和或摘要相等就推断每行正确。
切换条件¶
记录全量一致点和增量起点。停止源端新写入后确定最后提交位置,等待消费覆盖该位置,核对错误队列/遗漏表/重试状态及数据校验,再切换流量。还需检查旧连接池、定时任务、Task 和人工写入口,防止两边同时写。
源日志保留期覆盖最长全量耗时、故障停机、追平与复验;两小时建议不是普遍充分条件。消费者错误跳过、INSERT IGNORE、失败继续等策略必须计入异常清单,不可把“无报错”作为完整性证明。
回退边界¶
目标没有新业务写入时可按批准流程恢复源入口并保留目标证据。目标已有新写入时,先处理反向同步/补偿/人工合并,再恢复源端写入;连接串回退不会自动带回目标的新数据。记录允许损失、停写窗口、业务负责人和最后恢复点。
本实验在 v4.2.5 单 CN 实际执行并检查结果;没有验证生产切换、反向 CDC 或跨系统 exactly-once。