FileService 与数据缓存¶
实现基线为 v4.2.5。FileService 提供文件/对象 I/O;缓存保存可重新获取的数据,不保存唯一权威 SQL 状态。
读取层次¶
算子/Reader → 文件路径 + Offset + Size
→ 内存缓存 / 磁盘缓存
→ 可用的远程缓存数据
→ 对象存储读取
这是层次说明,具体策略由 I/O policy、缓存配置和路径决定;不是每次请求都必然依次访问所有层。缓存键关联文件范围,远程缓存使用 GetCacheData RPC 返回字节,不把 SQL 发到远端执行。
淘汰、所有权和正确性¶
内存及磁盘缓存有 fifocache 实现,不能统一写成传统 LRU。内存缓存数据还涉及引用/释放,磁盘缓存涉及路径、文件和容量维护。对象不可变有助于按文件范围缓存,但事务可见性仍由上层 MVCC/Logtail 判断。
关键不变量:缓存命中只能替代对应的数据读取,不能改变快照、删除过滤或查询结果。远程节点离线或缓存 miss 应按实现走回退/错误处理,不能由命中率推导事务成功。
扩容和性能¶
增加 CN 可以分散连接,也可以为分布式计划提供算力;一次查询是否远端执行由计划和调度决定。远程缓存命中与 SQL 远端执行分别观察。新 CN 往往需要建立同步状态和暖缓存;单次耗时不足以证明线性扩展。
比较冷/热读取时固定数据、SQL、计划、CN、并发和对象存储;同时观察实际读取字节、缓存层命中、远程读请求及 CPU。不能把对象元数据缓存、文件数据缓存、执行结果缓存混为一类。
诊断与安全实验¶
读取慢先区分计划扫描量、删除信息合并、缓存 miss、对象存储及远程 RPC。记录 Path/Offset/Size 和服务 ID。失去缓存后的正确结果与速度变化分别检查。清缓存或更改缓存容量应在隔离实验环境进行,不删除数据库对象文件。
集群容量调整见扩展 CN。