讲师中心 微信公众号
AI工具推荐 视频效率加速

Java中 BufferedInputStream 怎么在解析 Protocol Buffers 字节流时做前端缓存

老墨君_9363

老墨君_9363

发布时间:2026-07-24 14:06:21

|

897人浏览过

|

来源于php中文网

原创

BufferedInputStream 仅提供字节级缓存以减少 I/O 调用,不参与 protobuf 解析;正确用法是将其置于数据源与 CodedInputStream 之间,提升小读取吞吐量,缓冲区大小影响性能但不影响解析正确性。

java中 bufferedinputstream 怎么在解析 protocol buffers 字节流时做前端缓存

BufferedInputStream 本身不参与 Protocol Buffers(protobuf)的解析逻辑,它只是对底层输入流做字节级缓存,目的是减少系统 I/O 调用次数;在 protobuf 解析场景中,它的作用是“让 InputStream 读得更高效”,而非“帮 protobuf 做协议层缓存或预解析”。

为什么需要 BufferedInputStream 配合 protobuf?

protobuf 的 Java 实现(如 com.google.protobuf.CodedInputStream)默认直接包装原始 InputStream。如果这个流来自文件、网络 socket 或其他慢速源,每次调用 read() 都可能触发一次系统调用或网络等待。加上 BufferedInputStream 后,数据会先批量读入内存缓冲区(默认 8KB),后续 protobuf 解析时的多次小读取(比如读一个 varint 字段长度、再读字段内容)就能从内存快速返回,显著提升吞吐量。

正确包装方式:BufferedInputStream 在最外层

必须确保 BufferedInputStream 是最靠近数据源的一层,再交给 protobuf 解析器:

  • ✅ 正确:数据源 → BufferedInputStream → CodedInputStream → parseFrom()
  • ❌ 错误:数据源 → CodedInputStream → BufferedInputStream(无意义,CodedInputStream 不接受 BufferedInputStream 作为输入)

示例代码:

立即学习“Java免费学习笔记(深入)”;

InputStream rawStream = new FileInputStream("data.bin");
BufferedInputStream buffered = new BufferedInputStream(rawStream, 32 * 1024); // 自定义 32KB 缓冲区
CodedInputStream coded = CodedInputStream.newInstance(buffered);
MyMessage msg = MyMessage.parseFrom(coded);

注意缓冲区大小与 protobuf 消息边界的关系

BufferedInputStream 的缓冲是透明的、字节连续的,不感知 protobuf 的消息帧结构。它不会“提前读过界”或“截断消息”,只要底层流能完整提供消息字节,protobuf 解析就安全。但需注意:

  • 若用 parseDelimitedFrom()(带长度前缀),缓冲区大小不影响正确性,但太小(如 128B)会导致频繁 refill,抵消缓存收益
  • 若流中包含多个独立 protobuf 消息,且你逐个 parseDelimitedFrom(),BufferedInputStream 会自然复用已缓存字节,无需额外处理
  • 不要试图通过 buffered.mark()/reset() 来“回退解析位置”——protobuf 解析器内部状态和缓冲区位置不同步,极易出错

替代方案:更现代的推荐做法

Java 8+ 中,可考虑用 Files.newInputStream() + BufferedInputStream 组合,或直接使用 NIO 的 FileChannel + ByteBuffer 配合 CodedInputStream.newInstance(ByteBuffer),后者避免了堆内存拷贝,在大文件场景更高效。不过对于常规网络或磁盘读取,BufferedInputStream 仍是简单、可靠、零侵入的选择。

热门AI工具

更多
AionClaw
AionClaw Hot

AionClaw是一款面向办公、创作和编程任务的AI桌面智能体。

DeepSeek

DeepSeek是一款面向对话、写作、编程和推理场景的AI大模型工具。

超级简历WonderCV

一款AI办公效率工具,主要用于免费求职简历模版下载制作,应届生职场人必备简历制作神器,适合需要提升相关任务效率的用户。

讯飞绘文

讯飞绘文是一款由科大讯飞推出的一站式 AIGC 内容运营平台。

Loomy
Loomy Hot

一款AI工具,主要用于科大讯飞发布的桌面级 AI 助理,比 OpenClaw 更易用、更安全!,适合需要提升相关任务效率的用户。

UP简历
UP简历 Hot

一款AI办公效率工具,主要用于基于AI技术的免费在线简历制作工具,适合需要提升相关任务效率的用户。

音述AI
音述AI Hot

一款AI音频处理工具,主要用于音述AI是一个以“用声音述说故事”为核心的 AI 音乐创作与声音分享社区,适合需要提升相关任务效率的用户。

WorkBuddy

一款AI办公效率工具,主要用于腾讯云推出的AI原生桌面智能体工作台,适合需要提升相关任务效率的用户。

豆包大模型

豆包大模型是一款由字节跳动推出的企业级大语言模型服务平台。

相关专题

更多
python是前端还是后端
python是前端还是后端

Python属于前端也属于后端,其灵活性和丰富的生态系统使得开发人员能够在不同的领域中灵活运用。本专题为大家提供python相关的文章、下载、课程内容,供大家免费下载体验。

2463

2023.08.11

前端如何实现即时通讯
前端如何实现即时通讯

实现即时通讯的方法有WebSocket、Long Polling、Server-Sent Events、WebRTC等等。详细介绍:1、WebSocket,它可以在客户端和服务器之间建立持久连接,实现实时的双向通信,前端可以使用 WebSocket API来创建WebSocket连接,并通过发送和接收消息来实现即时通讯;2、Long Polling,是一种模拟实时通信的技术等等。

5323

2023.10.09

前端和后端的区别
前端和后端的区别

前端关注的是用户界面的设计和交互,而后端则注重数据处理和逻辑控制。想了解更多前端后端的相关内容,可以阅读本专题下面的文章。

6370

2024.03.19

php和前端的关联介绍
php和前端的关联介绍

php既可以作为前端语言,也可以作为后端语言。想了解更多php和前端的相关内容,可以阅读本专题下面的文章。

5958

2024.03.22

前端外包工作内容有哪些
前端外包工作内容有哪些

前端外包工作内容包括:1. 网站和应用程序开发;2. 用户界面和交互设计;3. 用户体验优化;4. 设计和视觉开发;5. 跨浏览器兼容性;6. 性能优化;7. 维护和更新;8. 项目管理和沟通。想了解更多前端的相关内容,可以阅读本专题下面的文章。

843

2024.05.22

java
java

Java是一个通用术语,用于表示Java软件及其组件,包括“Java运行时环境 (JRE)”、“Java虚拟机 (JVM)”以及“插件”。php中文网还为大家带了Java相关下载资源、相关课程以及相关文章等内容,供大家免费下载使用。

10497

2023.06.15

java正则表达式语法
java正则表达式语法

java正则表达式语法是一种模式匹配工具,它非常有用,可以在处理文本和字符串时快速地查找、替换、验证和提取特定的模式和数据。本专题提供java正则表达式语法的相关文章、下载和专题,供大家免费下载体验。

7622

2023.07.05

java自学难吗
java自学难吗

Java自学并不难。Java语言相对于其他一些编程语言而言,有着较为简洁和易读的语法,本专题为大家提供java自学难吗相关的文章,大家可以免费体验。

6652

2023.07.31

Linux 新手先学哪些命令
Linux 新手先学哪些命令

Linux新手命令专题汇集终端基础、文件目录操作、文本查看、软件安装和权限管理等入门文章,帮助按实际任务练习常用命令并建立命令行操作习惯。

0

2026.10.15

热门下载

更多
网站特效
/
网站源码
/
网站素材
/
前端模板

精品课程

更多
相关推荐
/
热门推荐
/
最新课程
dev.java 官方:Learn Java
dev.java 官方:Learn Java

共0课时 | 0人学习

Java JDBC数据库连接官方教程
Java JDBC数据库连接官方教程

共0课时 | 0人学习

关于我们 免责申明 举报中心 意见反馈 讲师合作 广告合作 最新更新
php中文网:公益在线php培训,帮助PHP学习者快速成长!
关注服务号
PHP中文网订阅号
每天精选资源文章推送

Copyright 2014-2026 https://www.php.cn/ All Rights Reserved | php.cn