实验:验证排序、JOIN 与 Spill¶
在隔离 v4.2.5 实例运行;下面只是最小结果基线,不能用它声称已触发 Spill。
DROP DATABASE IF EXISTS kernel_spill_518;
CREATE DATABASE kernel_spill_518;
USE kernel_spill_518;
CREATE TABLE t(id INT PRIMARY KEY, grp INT, payload VARCHAR(200));
INSERT INTO t VALUES(1,1,'a'),(2,1,'b'),(3,2,'c');
SET sort_spill_mem=1048576;
SELECT id FROM t ORDER BY payload DESC,id;
SELECT a.grp,COUNT(*) AS pairs FROM t a JOIN t b ON a.grp=b.grp GROUP BY a.grp ORDER BY a.grp;
SET sort_spill_mem=0;
DROP DATABASE kernel_spill_518;
排序 ID 为 3,2,1,JOIN 分组计数为 1→4、2→1。参数设置已复原。
触发与验收¶
用固定种子生成更大数据,逐步扩大行数/字符串长度,保持相同结果断言。排序同时保存 EXPLAIN ANALYZE、内存与临时文件/溢写观察;JOIN 保存物理连接类型、输入分布与内存准入事件。HashBuild 限额属于部署/控制器配置,不能把 sort_spill_mem 当成 JOIN 开关。
仅当确实观察到该路径的溢写事件/字节且结果一致,才记录“Spill 通过”。记录磁盘/FD 容量失败的原始错误,检查取消后临时文件、FD 和账户终态;不使用容器 RSS 单项证明精确记账。
本教程最小 SQL 可在单节点验证,真正溢写、资源失败与远端取消需单独执行。代码与范围见执行与内存。
最小基线使用 1 MiB 阈值。不要把 1 字节等极小阈值当作必然成功的配置;目标构建可能报告 Spill 磁盘预算不足,需保留原始错误并分别核对内存、磁盘和 FD 限额。