在sql存储过程中实现高性能分页,核心策略是避免全表扫描和排序开销,优先使用基于主键或唯一索引的“游标”式分页(keyset pagination),即通过记录上一页最后一条记录的id来定位下一页数据。具体做法是在where子句中利用 `id > last_id` 条件配合order by,确保查询能直接走索引范围扫描,从而将时间复杂度从o(n)降低到o(log n + k)。若必须使用传统的offset/limit方式,则应确保order by字段有索引,并尽量减小offset值,因为大偏移量会导致数据库扫描大量无用行后丢弃。

传统OFFSET与LIMIT的性能瓶颈在哪里
传统分页使用 `LIMIT offset, size` 时,数据库需要扫描前 offset + size 条记录,然后丢弃前 offset 条,只返回剩下的。当 offset 很大时,这种“深分页”会导致严重的性能下降,因为MySQL必须遍历并排序大量无关数据。例如,查询第10000页,每页10条,数据库实际要处理10009行数据,且如果排序字段无索引,还会产生临时表和文件排序。

CREATE PROCEDURE GetTraditionalPage(
IN p_page_num INT,
IN p_page_size INT
)
BEGIN
DECLARE v_offset INT;
SET v_offset = (p_page_num - 1) * p_page_size;
SELECT id, name, created_at
FROM users
ORDER BY created_at DESC
LIMIT v_offset, p_page_size;
END;
上述代码中,随着 p_page_num 增大,查询耗时线性增长。若 created_at 无索引,性能会更差。此方法适用于小数据量或浅分页场景,但不适合大数据集的高频访问。
如何使用游标式分页优化大偏移量查询
游标式分页(Keyset Pagination)不依赖偏移量,而是依赖上一页最后一条记录的主键值。假设上一页最后一条记录的ID为 last_id,下一页查询只需查找 id > last_id 的记录并限制数量。这种方式无论翻到哪一页,查询成本都恒定,因为它直接定位到起始位置,无需扫描前面的数据。前提是主键或排序字段必须是单调递增或递减的,且通常结合主键索引使用。

CREATE PROCEDURE GetCursorPage(
IN p_last_id BIGINT,
IN p_page_size INT
)
BEGIN
SELECT id, name, created_at
FROM users
WHERE id > p_last_id
ORDER BY id ASC
LIMIT p_page_size;
END;
调用时,前端需传递上一页最后的 id。例如,第一页查询不带 WHERE 或设 p_last_id = 0,获取结果后提取最大ID传给下一次请求。这种方法避免了深分页问题,性能稳定。注意:若存在相同ID的记录(如复合主键),需增加次要排序条件,如 AND (id, created_at) > (p_last_id, last_created_at)。
当数据动态变化时游标分页会出现什么问题
在游标分页中,如果数据在查询间隙被插入、删除或更新,可能导致数据重复或遗漏。例如,在翻页过程中有新记录插入到当前页之前,用户可能看到重复数据;若记录被删除,用户可能跳过某些数据。这是因为游标分页依赖于数据的静态快照一致性,而默认事务隔离级别下无法保证这一点。解决思路包括使用快照读(REPEATABLE READ)或在应用层去重,但最根本的是接受最终一致性,或在高频变动场景下回退到传统分页并限制最大页数。


















