使用已保存的查询向量检索¶
把查询向量保存在表中,再用它检索 IVF-FLAT 索引。应用可以把查询向量作为数据管理,而不必在每条 SQL 中写入向量字面量。以下 SQL 适用于 MatrixOne v4.2.6 及之后的版本。
创建三条待检索数据和一条查询向量:
DROP DATABASE IF EXISTS scalar_vector_demo;
CREATE DATABASE scalar_vector_demo;
USE scalar_vector_demo;
SET experimental_ivf_index = 1;
SET probe_limit = 1;
CREATE TABLE items(id VARCHAR(32) PRIMARY KEY, v VECF64(3) NOT NULL);
INSERT INTO items VALUES ('a','[0,0,0]'),('b','[1,0,0]'),('c','[3,0,0]');
CREATE INDEX ix USING IVFFLAT ON items(v) LISTS=1 OP_TYPE 'vector_l2_ops';
CREATE TABLE query_vectors(id VARCHAR(32) PRIMARY KEY, v VECF64(3));
INSERT INTO query_vectors VALUES ('q','[1,0,0]');
查询距离最近的两条数据,结果依次为 b、a。在 EXPLAIN 输出中查找 Scalar Vector Query 和 ivf_search,确认使用了索引路径。把已保存的查询向量改为 [3,0,0] 后,结果依次变为 c、b:
EXPLAIN SELECT id FROM items ORDER BY l2_distance(v,(SELECT v FROM query_vectors WHERE id='q')) LIMIT 2;
SELECT id FROM items ORDER BY l2_distance(v,(SELECT v FROM query_vectors WHERE id='q')) LIMIT 2;
UPDATE query_vectors SET v='[3,0,0]' WHERE id='q';
SELECT id FROM items ORDER BY l2_distance(v,(SELECT v FROM query_vectors WHERE id='q')) LIMIT 2;
DROP DATABASE scalar_vector_demo;
待检索的向量列必须为 NOT NULL,标量子查询最多返回一个向量。IVF-FLAT 是近似检索;这三条数据用于核对查询形态与结果,不用于衡量召回率或性能。相同的查询形态也支持 HNSW。HNSW 建索引、PREPARE、NULL 提供者与快照的行为详见标量子查询向量检索。对应的 MatrixOne 回归测试覆盖了该功能。