讲师中心 微信公众号
AI工具推荐 视频效率加速

如何解决Redis缓存数据倾斜导致的单节点压力过大_增加随机后缀打散Key

老墨姑娘_4730

老墨姑娘_4730

发布时间:2026-07-04 09:31:36

|

875人浏览过

|

来源于php中文网

原创

加随机后缀能缓解Redis数据倾斜,因其通过扩大键空间使CRC16哈希值更离散,避免前缀相同Key集中落于同一槽位;后缀须可复现(如user_id % N或MD5+salt取固定位),严禁真随机;读写逻辑必须严格一致,N=4或8为实践最优解,兼顾均衡性与开销。

如何解决redis缓存数据倾斜导致的单节点压力过大_增加随机后缀打散key

为什么加随机后缀能缓解数据倾斜

Redis Cluster 默认用 crc16(key) % 16384 算槽位,如果大量 Key 前缀相同(如 hot_user:1001、hot_user:1002),crc16 输出容易集中在相邻区间,最终落到同一节点。加随机后缀(如 hot_user:1001_abc)本质是扩大键空间分布,让哈希值更离散,从而把原本集中访问的逻辑 Key 拆到多个物理 Slot 上。

怎么生成和使用随机后缀才有效

后缀不能真“随机”——每次读写必须能复现同一个后缀,否则会读不到数据。常见做法是用固定种子做哈希或取模:

  • 用业务 ID + 固定 salt 做哈希再取低几位,例如 md5(user_id + "salt")[:3]
  • 直接对 user_id 取模:后缀 = user_id % N(N 是期望打散份数,建议设为 2 的幂,如 4、8、16)
  • 避免用 Math.random() 或时间戳,否则同一 Key 多次请求可能写入不同后缀,造成数据不一致

写入和读取必须保持后缀逻辑一致

这是最容易出错的地方:写入用了 hot_key_001,读却查 hot_key_002,等于白打散。必须确保:

redis-tools
redis-tools

按类别查找Redis命令、检测服务器连接、监控键数量和内存占用,支持离线速查表。

下载
  • 所有客户端(Java/Go/Python)使用同一套后缀生成规则
  • 更新操作要批量覆盖所有后缀副本(如 N=4 就得 SET hot_key_001 v、SET hot_key_002 v …)
  • 读操作只需查任意一个后缀即可(因为内容一致),但需保证 fallback 机制——比如某个后缀 Key 不存在时,再查下一个

后缀数量不是越多越好

打散到 64 个后缀听起来很均衡,但实际带来三重代价:

  • 内存开销翻 64 倍(每个副本都存完整 value)
  • 写放大:一次更新要发 64 次网络请求(除非用 pipeline 批量)
  • 运维成本:监控、过期策略、淘汰逻辑都要适配多副本模型

实践中,N=4 或 N=8 已能显著降低单节点压力,再往上收益递减。真正需要高并发读的热点 Key,再配合本地缓存更划算。

热门AI工具

更多
豆包大模型

豆包大模型是一款由字节跳动推出的企业级大语言模型服务平台。

PixTV
PixTV Hot

PixTV是一款面向AIGC内容创作的AI视频生成工具。

PixPix
PixPix Hot

PixPix是一款面向电商视觉生产的AI商品图生成工具。

蛙蛙写作

一款AI论文写作工具,主要用于超级AI智能写作助手,适合需要提升相关任务效率的用户。

二狗PPT
二狗PPT Hot

一款AI演示文稿工具,主要用于专为中式职场打造的AI PPT生成工具,适合需要提升相关任务效率的用户。

咔片AIPPT

一款在线AI演示文稿制作工具,可根据主题和内容需求辅助生成PPT结构与页面,提高演示材料制作效率。

Atoms
Atoms Hot

Atoms是一款AI智能体工具,第一支自动构建真实业务的 AI 团队。

DeepSeek

DeepSeek是一款面向对话、写作、编程和推理场景的AI大模型工具。

WorkBuddy

一款AI办公效率工具,主要用于腾讯云推出的AI原生桌面智能体工作台,适合需要提升相关任务效率的用户。

相关专题

更多
常用的数据库软件
常用的数据库软件

常用的数据库软件有MySQL、Oracle、SQL Server、PostgreSQL、MongoDB、Redis、Cassandra、Hadoop、Spark和Amazon DynamoDB。更多关于数据库软件的内容详情请看本专题下面的文章。php中文网欢迎大家前来学习。

4529

2023.11.02

内存数据库有哪些
内存数据库有哪些

内存数据库有Redis、Memcached、Apache Ignite、VoltDB、TimesTen、H2 Database、Aerospike、Oracle TimesTen In-Memory Database、SAP HANA和ache Cassandra。更多关于内存数据库相关问题,详情请看本专题下面的文章。php中文网欢迎大家前来学习。

4075

2023.11.14

mongodb和redis哪个读取速度快
mongodb和redis哪个读取速度快

redis 的读取速度比 mongodb 更快。原因包括:1. redis 使用简单的键值存储,而 mongodb 存储 json 格式的数据,需要解析和反序列化。2. redis 使用哈希表快速查找数据,而 mongodb 使用 b-tree 索引。因此,redis 在需要高性能读取操作的应用程序中是一个更好的选择。本专题为大家提供相关的文章、下载、课程内容,供大家免费下载体验。

7552

2024.04.02

redis怎么做缓存服务器
redis怎么做缓存服务器

redis 作为缓存服务器的答案:redis 是一款开源、高性能、分布式的键值存储,可作为缓存服务器使用。本专题为大家提供相关的文章、下载、课程内容,供大家免费下载体验。

643

2024.04.07

redis怎么解决数据一致性
redis怎么解决数据一致性

redis 提供了两种一致性模型,以维护副本数据一致性:强一致性 (sync) 确保写操作仅在复制到所有从节点后才完成;最终一致性 (async) 则在主节点上写操作后认为已完成,牺牲一致性换取性能。本专题为大家提供相关的文章、下载、课程内容,供大家免费下载体验。

756

2024.04.07

mysql和redis怎么保证双写一致性
mysql和redis怎么保证双写一致性

确保 mysql 和 redis 双写一致性的技术包括:1、事务性更新:同时更新 mysql 和 redis,保证一致性;2、主从复制:mysql 主服务器更改同步到 redis 从服务器;3、基于事件的更新:mysql 记录更改并发送到 redis等等。本专题为大家提供相关的文章、下载、课程内容,供大家免费下载体验。

7462

2024.04.07

redis缓存一般存些什么数据
redis缓存一般存些什么数据

redis缓存中存储的数据类型包括:字符串、哈希、列表、集合、有序集合、位图、地理空间数据和hyperloglog。这些数据类型适用于存储各种数据,从简单信息到复杂对象和地理位置。本专题为大家提供相关的文章、下载、课程内容,供大家免费下载体验。

1160

2024.04.07

redis的8种数据类型有哪些
redis的8种数据类型有哪些

redis 提供 8 种数据类型:字符串(文本、数字、二进制)、哈希(键值对)、列表(有序集合)、集合(无序唯一元素)、有序集合(按分数排序)、地理空间(地理位置)、hyperloglog(估计大数据基数)和位图(位序列存储)。本专题为大家提供相关的文章、下载、课程内容,供大家免费下载体验。

1136

2024.04.07

OpenJDK JVM参数怎么调优
OpenJDK JVM参数怎么调优

Java应用运行缓慢,如何调整JVM参数?本专题介绍OpenJDK JVM性能调优的基本流程,涵盖性能指标确认、运行数据采集、内存配置和垃圾回收分析,帮助你先定位瓶颈,再通过对照测试验证效果,避免直接套用参数而影响应用稳定性。

60

2026.10.16

热门下载

更多
网站特效
/
网站源码
/
网站素材
/
前端模板

精品课程

更多
相关推荐
/
热门推荐
/
最新课程
phpEnv手册
phpEnv手册

共0课时 | 0人学习

关于我们 免责申明 举报中心 意见反馈 讲师合作 广告合作 最新更新
php中文网:公益在线php培训,帮助PHP学习者快速成长!
关注服务号
PHP中文网订阅号
每天精选资源文章推送

Copyright 2014-2026 https://www.php.cn/ All Rights Reserved | php.cn