讲师中心 微信公众号
AI工具推荐 视频效率加速

Protobuf怎么与Redis集成_自定义Redis序列化器

胖枫小哥_6088

胖枫小哥_6088

发布时间:2026-06-23 06:50:39

|

713人浏览过

|

来源于php中文网

原创

会。Redis只认byte[]或字符串,Protobuf Java类默认不可序列化,需自定义RedisSerializer实现serialize()/deserialize(),注意空值、类型擦除及版本兼容问题。

protobuf怎么与redis集成_自定义redis序列化器

Protobuf对象直接存Redis会报错吗?

会。Redis只认byte[]或字符串,而Protobuf生成的Java类(比如UserProto.User)默认没有实现Serializable,也不带无参构造器,直接用JdkSerializationRedisSerializer会抛NotSerializableException或InvalidClassException。更关键的是,Protobuf二进制格式本身是紧凑、无schema的,Redis不理解它——所以必须自己控制序列化/反序列化环节。

怎么写一个Protobuf专用的Redis序列化器?

核心是实现RedisSerializer<t></t>接口,重点覆盖serialize()和deserialize()。注意三点:类型擦除问题、空值处理、proto message的toByteArray()与parseFrom()调用安全。

  • serialize()里判空,非空才调message.toByteArray(),返回原始字节数组(不要Base64编码,浪费空间)
  • deserialize()里先判空字节数组,再用对应Message.getDefaultInstance().getParserForType().parseFrom(bytes),避免硬写UserProto.User.parseFrom(bytes)导致泛型丢失
  • 构造器接收Class<t></t>,内部缓存Parser<t></t>,避免每次反序列化都反射获取

示例片段:

Redis Skill - 高性能缓存管理
Redis Skill - 高性能缓存管理

Redis 缓存和数据结构管理技能。通过自然语言操作 Redis,支持 String、Hash、List、Set、ZSet、Stream 等数据结构操作。当用户提到 Redis、缓存、消息队列、会话存储时使用此技能。

下载
public class ProtobufRedisSerializer<T extends Message> implements RedisSerializer<T> {
    private final Class<T> targetClass;
    private final Parser<T> parser;

    public ProtobufRedisSerializer(Class<T> targetClass) {
        this.targetClass = targetClass;
        this.parser = (Parser<T>) targetClass.getDeclaredMethod("getParserForType")
            .invoke(targetClass.getDeclaredMethod("getDefaultInstance").invoke(null));
    }

    @Override
    public byte[] serialize(T object) throws SerializationException {
        return object == null ? new byte[0] : object.toByteArray();
    }

    @Override
    public T deserialize(byte[] bytes) throws SerializationException {
        if (bytes == null || bytes.length == 0) return null;
        try {
            return parser.parseFrom(bytes);
        } catch (InvalidProtocolBufferException e) {
            throw new SerializationException("Failed to parse protobuf", e);
        }
    }
}

Spring Boot里怎么配置Protobuf序列化器?

不能直接塞进RedisTemplate的defaultSerializer,否则所有key/value都走Protobuf,连String类型都崩。正确做法是按业务场景显式指定——比如专门存用户proto时用定制template,其他仍用默认JSON或JDK序列化器。

  • 定义独立的RedisTemplate<String, UserProto.User>,设置valueSerializer为你的ProtobufRedisSerializer<UserProto.User>
  • key保持StringRedisSerializer,别动key的序列化逻辑
  • 如果多个proto类型共存,别搞“通用泛型template”,每个类型配一个template Bean,用@Qualifier区分
  • 注意RedisCacheManager不支持这种细粒度value序列化,缓存注解(@Cacheable)没法直接用Protobuf对象,得退回到手动redisTemplate.opsForValue().set()

Protobuf+Redis有哪些隐藏坑?

协议版本升级最要命。比如v1的User加了optional字段,v2客户端存进去,v1客户端取出来会忽略新字段——这本身是Protobuf特性,但Redis里没版本标识,你根本不知道这个byte[]是哪个版本序列化的。

  • 别在Redis里混存不同proto版本的对象,尤其当字段编号被重用时,parseFrom()可能静默丢数据
  • 如果必须兼容多版本,序列化前在字节数组头部写2字节版本号,反序列化时先读版本再分发到对应parser
  • Redis过期策略对Protobuf无效——它只管key存活,不管value是否还能被当前代码解析;上线新proto结构前,务必清掉旧缓存
  • Protobuf二进制不可读,调试时用TextFormat.printToString()临时转成文本看结构,但别在生产序列化里用,性能差一个数量级

真正难的不是写序列化器,而是让团队意识到:Protobuf不是“换个序列化方式”那么简单,它是把schema契约从运行时移到了编译期,Redis只是个字节数组搬运工,契约管理得靠人盯紧。

热门AI工具

更多
AionClaw
AionClaw Hot

AionClaw是一款面向办公、创作和编程任务的AI桌面智能体。

Laper
Laper Hot

Laper是专为编剧、导演和制片人推出的 AI 原生剧本创作工具。

蛙蛙写作

一款AI论文写作工具,主要用于超级AI智能写作助手,适合需要提升相关任务效率的用户。

豆包大模型

豆包大模型是一款由字节跳动推出的企业级大语言模型服务平台。

火山引擎

火山引擎是一款面向企业的云计算与AI服务平台。

DeepSeek

DeepSeek是一款面向对话、写作、编程和推理场景的AI大模型工具。

WorkBuddy

一款AI办公效率工具,主要用于腾讯云推出的AI原生桌面智能体工作台,适合需要提升相关任务效率的用户。

Atoms
Atoms Hot

Atoms是一款AI智能体工具,第一支自动构建真实业务的 AI 团队。

音述AI
音述AI Hot

一款AI音频处理工具,主要用于音述AI是一个以“用声音述说故事”为核心的 AI 音乐创作与声音分享社区,适合需要提升相关任务效率的用户。

相关专题

更多
常用的数据库软件
常用的数据库软件

常用的数据库软件有MySQL、Oracle、SQL Server、PostgreSQL、MongoDB、Redis、Cassandra、Hadoop、Spark和Amazon DynamoDB。更多关于数据库软件的内容详情请看本专题下面的文章。php中文网欢迎大家前来学习。

4389

2023.11.02

内存数据库有哪些
内存数据库有哪些

内存数据库有Redis、Memcached、Apache Ignite、VoltDB、TimesTen、H2 Database、Aerospike、Oracle TimesTen In-Memory Database、SAP HANA和ache Cassandra。更多关于内存数据库相关问题,详情请看本专题下面的文章。php中文网欢迎大家前来学习。

3915

2023.11.14

mongodb和redis哪个读取速度快
mongodb和redis哪个读取速度快

redis 的读取速度比 mongodb 更快。原因包括:1. redis 使用简单的键值存储,而 mongodb 存储 json 格式的数据,需要解析和反序列化。2. redis 使用哈希表快速查找数据,而 mongodb 使用 b-tree 索引。因此,redis 在需要高性能读取操作的应用程序中是一个更好的选择。本专题为大家提供相关的文章、下载、课程内容,供大家免费下载体验。

7132

2024.04.02

redis怎么做缓存服务器
redis怎么做缓存服务器

redis 作为缓存服务器的答案:redis 是一款开源、高性能、分布式的键值存储,可作为缓存服务器使用。本专题为大家提供相关的文章、下载、课程内容,供大家免费下载体验。

643

2024.04.07

redis怎么解决数据一致性
redis怎么解决数据一致性

redis 提供了两种一致性模型,以维护副本数据一致性:强一致性 (sync) 确保写操作仅在复制到所有从节点后才完成;最终一致性 (async) 则在主节点上写操作后认为已完成,牺牲一致性换取性能。本专题为大家提供相关的文章、下载、课程内容,供大家免费下载体验。

756

2024.04.07

mysql和redis怎么保证双写一致性
mysql和redis怎么保证双写一致性

确保 mysql 和 redis 双写一致性的技术包括:1、事务性更新:同时更新 mysql 和 redis,保证一致性;2、主从复制:mysql 主服务器更改同步到 redis 从服务器;3、基于事件的更新:mysql 记录更改并发送到 redis等等。本专题为大家提供相关的文章、下载、课程内容,供大家免费下载体验。

6862

2024.04.07

redis缓存一般存些什么数据
redis缓存一般存些什么数据

redis缓存中存储的数据类型包括:字符串、哈希、列表、集合、有序集合、位图、地理空间数据和hyperloglog。这些数据类型适用于存储各种数据,从简单信息到复杂对象和地理位置。本专题为大家提供相关的文章、下载、课程内容,供大家免费下载体验。

1160

2024.04.07

redis的8种数据类型有哪些
redis的8种数据类型有哪些

redis 提供 8 种数据类型:字符串(文本、数字、二进制)、哈希(键值对)、列表(有序集合)、集合(无序唯一元素)、有序集合(按分数排序)、地理空间(地理位置)、hyperloglog(估计大数据基数)和位图(位序列存储)。本专题为大家提供相关的文章、下载、课程内容,供大家免费下载体验。

1056

2024.04.07

PixTV官网入口地址合集
PixTV官网入口地址合集

本专题汇总了 PixTV AI 一站式视频创作平台的官方入口与使用教程。无需下载软件,浏览器直接访问即可使用。平台将剧本、图像、视频、声音与剪辑整合在“无限画布”中,接入 GPT Image 2.5、Seedance 2.5 等头部模型。本专题整理了从新建画布、角色锚定、分镜拆分到视频生成与导出的完整操作指南,助你快速上手 AI 短剧与漫剧创作。

20

2026.10.10

热门下载

更多
网站特效
/
网站源码
/
网站素材
/
前端模板

精品课程

更多
相关推荐
/
热门推荐
/
最新课程
Kratos框架快速入门
Kratos框架快速入门

共0课时 | 0人学习

关于我们 免责申明 举报中心 意见反馈 讲师合作 广告合作 最新更新
php中文网:公益在线php培训,帮助PHP学习者快速成长!
关注服务号
PHP中文网订阅号
每天精选资源文章推送

Copyright 2014-2026 https://www.php.cn/ All Rights Reserved | php.cn