讲师中心 微信公众号

工具推荐

视频效率加速
SoundView
SoundView

字幕擦除翻译、配音口型同步

updream

一键生成高质量推广成片

Seko
Seko

AI短剧一键生成成片

立刻MV
立刻MV

低成本歌曲 MV、视频生成

如何在Redis中利用Bigkeys命令查找并清理占用大的Key

星明酱_1875

星明酱_1875

发布时间:2026-04-12 15:23:34

|

959人浏览过

|

来源于php中文网

原创

redis-cli --bigkeys 无法准确识别大内存key,因其仅统计逻辑大小(如元素个数或字符串长度),而非实际内存占用;精准定位需用 MEMORY USAGE 配合 SCAN 脚本,清理应优先使用 UNLINK 或分批操作。

如何在redis中利用bigkeys命令查找并清理占用大的key

redis-cli --bigkeys 找不到大key?先确认是否在正确模式下运行

Redis 的 redis-cli --bigkeys 不是实时扫描全库的“智能分析器”,它本质是用 SCAN 遍历 key,对每个 key 调用 TYPE + 对应的 size 命令(比如 STRLEN、LLEN、SCARD、ZCARD、HLEN),所以结果受当前数据库、SCAN 游标步长和数据分布影响。

  • 默认只查 db0,如果业务 key 在 db1 或 db15,必须加 -n 1 参数指定
  • 它不统计 value 序列化后的实际内存占用(比如一个 1KB 的字符串和一个带 1000 个嵌套字段的 JSON 字符串,STRLEN 都只返回字节数,但 Redis 内部编码开销不同)
  • 对 Hash / Set / ZSet 类型,只返回元素个数,不统计所有 field/value 总体积 —— 这意味着一个只有 10 个 field 但每个 value 是 1MB 图片 Base64 的 HASH,会被漏判
  • 执行期间会持续发 SCAN 请求,若 key 数量超千万,可能跑几十分钟,且会加重主节点负载,生产环境建议在从节点或低峰期运行

为什么 bigkeys 显示的“最大”key 和 info memory 统计对不上?

这是最常被误解的一点:redis-cli --bigkeys 报出的是「逻辑大小」(元素个数或字符串长度),而 INFO memory 里的 used_memory_dataset 是「实际内存占用」,两者差一个数量级都很正常。

  • Redis 对小字符串用 embstr 编码,大字符串转 raw;对 Hash 默认用 ziplist(紧凑存储),元素多或值大时升级为 hashtable(指针+哈希表结构,内存翻倍)
  • 一个 LIST 有 10 万个空字符串(""),LLEN 返回 100000,但每个空串仍占约 50 字节(含 redisObject + SDS 头),总内存可能超 5MB —— --bigkeys 却只把它当“小 key”
  • 真正的大内存消耗者,往往是那些 TYPE 是 string 但 STRLEN 看似不大、实际 value 是序列化后超大的 protobuf/json(比如日志快照、用户画像 blob)

想精准定位内存大户?得绕过 bigkeys,直接用 memory usage

Redis 4.0+ 提供了 MEMORY USAGE 命令,能返回任意 key 的近似内存占用(单位字节),这才是判断“谁吃内存”的黄金标准。但它不能批量扫,必须配合 SCAN 自己写脚本。

Sentinal Redis
Sentinal Redis

监控Redis服务器健康状况、内存、性能及BullMQ队列。检查队列深度、失败任务,分析慢查询并诊断问题。

下载
  • 不要用 KEYS * —— 会阻塞主线程,线上禁用
  • 推荐用 Python + redis-py 写轻量脚本:用 scan_iter(count=1000) 分批取 key,对每个 key 调用 memory_usage(key),记录 topN
  • 注意:MEMORY USAGE 在集群模式下只能查本 slot 的 key,跨 slot 需连各节点分别查
  • 某些 key 可能返回 -1(如已过期但未被惰性删除),脚本里要跳过
for key in r.scan_iter(count=500):
    try:
        mem = r.memory_usage(key)
        if mem and mem > 1024 * 1024:  # 超 1MB 记录
            print(f"{key} → {mem} bytes")
    except redis.exceptions.ResponseError:
        continue  # 忽略不存在或权限问题的 key

清理大 key 不能直接 DEL?小心阻塞和主从延迟

对一个包含 50 万成员的 SET 或 100MB 的 STRING 执行 DEL,Redis 主线程会卡住直到释放完全部内存 —— 这会导致请求堆积、超时、主从复制中断。

  • 优先用渐进式删除:UNLINK(Redis 4.0+),它把 key 标记为待删,由后台线程异步回收内存
  • 对 LIST/HASH/SET/ZSET,可分批 LTRIM/HSCAN+HDEL/SSCAN+SREM,控制每次操作耗时在毫秒级
  • 别在高峰期删;删前用 CLIENT LIST 确认没有慢查询积压;删后观察 INFO stats 中的 expired_keys 和 evicted_keys 是否突增
  • 更稳妥的做法是:改代码,让业务避免生成超大 key;用分片(sharding)代替单 key 存海量数据(例如 user:123:orders → user:123:orders:202401)

大 key 的危害不在“找不找得到”,而在“删不删得安全”。很多团队卡在“知道有问题却不敢动”,根源是对 UNLINK 的行为、后台线程调度、以及不同编码类型释放内存的实际路径没摸清。真要动手,先在从库验证脚本,再盯紧 latency monitor 和 slowlog get。

热门AI工具

更多
VibeKnow
VibeKnow Hot

一款AI视频创作工具,主要用于全球首个AI知识视频创作平台,文档、文章、网页,一键生成视频,适合需要提升相关任务效率的用户。

UP简历
UP简历 Hot

一款AI办公效率工具,主要用于基于AI技术的免费在线简历制作工具,适合需要提升相关任务效率的用户。

DeepSeek

DeepSeek是一款面向对话、写作、编程和推理场景的AI大模型工具。

UpDream
UpDream Hot

一款AI视频创作工具,主要用于哔哩哔哩推出的自研AI视频创作工具,适合需要提升相关任务效率的用户。

WorkBuddy

一款AI办公效率工具,主要用于腾讯云推出的AI原生桌面智能体工作台,适合需要提升相关任务效率的用户。

PixPix
PixPix Hot

PixPix是一款面向电商视觉生产的AI商品图生成工具。

豆包大模型

豆包大模型是一款由字节跳动推出的企业级大语言模型服务平台。

立刻MV
立刻MV Hot

立刻MV是一款AI文本写作工具,AI 音乐视频(MV)创作工具。

Atoms
Atoms Hot

Atoms是一款AI智能体工具,第一支自动构建真实业务的 AI 团队。

相关专题

更多
常用的数据库软件
常用的数据库软件

常用的数据库软件有MySQL、Oracle、SQL Server、PostgreSQL、MongoDB、Redis、Cassandra、Hadoop、Spark和Amazon DynamoDB。更多关于数据库软件的内容详情请看本专题下面的文章。php中文网欢迎大家前来学习。

5029

2023.11.02

内存数据库有哪些
内存数据库有哪些

内存数据库有Redis、Memcached、Apache Ignite、VoltDB、TimesTen、H2 Database、Aerospike、Oracle TimesTen In-Memory Database、SAP HANA和ache Cassandra。更多关于内存数据库相关问题,详情请看本专题下面的文章。php中文网欢迎大家前来学习。

4615

2023.11.14

mongodb和redis哪个读取速度快
mongodb和redis哪个读取速度快

redis 的读取速度比 mongodb 更快。原因包括:1. redis 使用简单的键值存储,而 mongodb 存储 json 格式的数据,需要解析和反序列化。2. redis 使用哈希表快速查找数据,而 mongodb 使用 b-tree 索引。因此,redis 在需要高性能读取操作的应用程序中是一个更好的选择。本专题为大家提供相关的文章、下载、课程内容,供大家免费下载体验。

9032

2024.04.02

redis怎么做缓存服务器
redis怎么做缓存服务器

redis 作为缓存服务器的答案:redis 是一款开源、高性能、分布式的键值存储,可作为缓存服务器使用。本专题为大家提供相关的文章、下载、课程内容,供大家免费下载体验。

683

2024.04.07

redis怎么解决数据一致性
redis怎么解决数据一致性

redis 提供了两种一致性模型,以维护副本数据一致性:强一致性 (sync) 确保写操作仅在复制到所有从节点后才完成;最终一致性 (async) 则在主节点上写操作后认为已完成,牺牲一致性换取性能。本专题为大家提供相关的文章、下载、课程内容,供大家免费下载体验。

776

2024.04.07

mysql和redis怎么保证双写一致性
mysql和redis怎么保证双写一致性

确保 mysql 和 redis 双写一致性的技术包括:1、事务性更新:同时更新 mysql 和 redis,保证一致性;2、主从复制:mysql 主服务器更改同步到 redis 从服务器;3、基于事件的更新:mysql 记录更改并发送到 redis等等。本专题为大家提供相关的文章、下载、课程内容,供大家免费下载体验。

9482

2024.04.07

redis缓存一般存些什么数据
redis缓存一般存些什么数据

redis缓存中存储的数据类型包括:字符串、哈希、列表、集合、有序集合、位图、地理空间数据和hyperloglog。这些数据类型适用于存储各种数据,从简单信息到复杂对象和地理位置。本专题为大家提供相关的文章、下载、课程内容,供大家免费下载体验。

1200

2024.04.07

redis的8种数据类型有哪些
redis的8种数据类型有哪些

redis 提供 8 种数据类型:字符串(文本、数字、二进制)、哈希(键值对)、列表(有序集合)、集合(无序唯一元素)、有序集合(按分数排序)、地理空间(地理位置)、hyperloglog(估计大数据基数)和位图(位序列存储)。本专题为大家提供相关的文章、下载、课程内容,供大家免费下载体验。

1536

2024.04.07

GoFrame框架Web开发与路由中间件
GoFrame框架Web开发与路由中间件

本专题聚焦GoFrame框架的Web开发,拆解路由注册与匹配规则、请求参数获取、参数校验与中间件执行顺序,说明统一响应、JWT鉴权、文件上传与接口文档生成的落地方式,并补充优雅重启与测试实践。

0

2026.11.17

热门下载

更多
网站特效
/
网站源码
/
网站素材
/
前端模板

精品课程

更多
相关推荐
/
热门推荐
/
最新课程
Go-Zero官方文档
Go-Zero官方文档

共0课时 | 0人学习

关于我们 免责申明 举报中心 意见反馈 讲师合作 广告合作 最新更新
php中文网:公益在线php培训,帮助PHP学习者快速成长!
关注服务号
PHP中文网订阅号
每天精选资源文章推送

Copyright 2014-2026 https://www.php.cn/ All Rights Reserved | php.cn