讲师中心 微信公众号

工具推荐

视频效率加速
剧云
剧云

中文短剧剧本制作平台

Laper
Laper

剧本策划到成片协作

AniShort
AniShort

AI短剧协同制作平台

立刻MV
立刻MV

低成本歌曲 MV、视频生成

c++怎么高效使用setvbuf自定义缓冲区_减少磁盘IO频率【详解】

陌伟酱_3589

陌伟酱_3589

发布时间:2026-04-10 22:28:06

|

433人浏览过

|

来源于php中文网

原创

setvbuf不能用于C++流对象,因其仅作用于FILE,对std::ofstream等无效;强行调用std::filebuf的setvbuf会触发未定义行为,因filebuf已接管缓冲逻辑。

c++怎么高效使用setvbuf自定义缓冲区_减少磁盘io频率【详解】

setvbuf 为什么不能用在 C++ 流对象上

setvbuf 是 C 标准库函数,只对 FILE* 生效,对 std::ofstream、std::ifstream 等 C++ 流对象完全无效。强行对 std::ofstream::rdbuf() 返回的 std::filebuf* 调用 setvbuf 不仅没效果,还可能触发未定义行为——因为 std::filebuf 内部已接管缓冲逻辑,且其底层 FILE* 可能已被设为无缓冲或由系统管理。

常见错误现象:
- 调用 setvbuf(fp, buf, _IOFBF, size) 后,写入仍频繁落盘(strace 显示大量 write() 系统调用)
- 在 C++ 流构造后试图用 freopen 或 setvbuf “接管”底层文件描述符,结果流行为异常(如部分写入丢失、flush() 失效)

真正可控的缓冲方式:用 std::filebuf::pubsetbuf

std::filebuf::pubsetbuf 是 C++ 标准中唯一可显式设置底层缓冲区的接口,但它有严格限制:必须在文件打开前调用,且仅对某些实现(如 libstdc++)在特定模式下生效;libc++(Clang 默认)通常直接忽略该调用。

实操建议:
- ✅ 先分配缓冲区内存:char buf[65536];
- ✅ 构造 std::filebuf 对象,立即调用:fb.pubsetbuf(buf, sizeof(buf));
- ✅ 再调用 fb.open("out.txt", std::ios_base::out);
- ❌ 不要在 std::ofstream 构造完成后尝试获取并修改其 rdbuf() —— 此时文件已打开,pubsetbuf 返回 nullptr,调用无效

注意:pubsetbuf 的缓冲区生命周期必须长于 filebuf 对象;若用栈内存(如上例),确保 filebuf 不会比缓冲区先析构。

更可靠的选择:绕过 iostream,直接用 FILE* + setvbuf

如果目标是确定性缓冲控制(比如固定 128KB 全缓冲),放弃 std::ofstream,改用 C 风格 I/O 更直接、可预测。

C++14
C++14

C++14 对 C++11 的修正与增强版本,适合旧系统维护和较老工具链兼容。

下载

立即学习“C++免费学习笔记(深入)”;

使用场景:
- 日志批量写入、导出中间数据、离线处理等对性能敏感但无需格式化功能的场合
- 需要与 C 库(如 zlib、libpng)混用文件句柄时

实操步骤:
- 用 fopen("data.bin", "wb") 获取 FILE*
- 立即调用 setvbuf(fp, nullptr, _IOFBF, 131072)(第二个参数为 nullptr 让 libc 自行分配)
- 用 fwrite() / fputs() 写入,fclose() 或 fflush() 触发实际落盘
- 若需兼容 C++ RAII,可封装为轻量类,析构时调用 fclose()

性能影响:
- 缓冲区太小(如 4KB)会导致频繁 flush,抵消缓冲收益
- 缓冲区太大(如 >1MB)可能增加单次 write 延迟,且占用更多 RSS;一般 64–256KB 是较优区间

磁盘 IO 频率没降?检查这些隐性干扰

即使正确设置了缓冲,strace -e write 仍看到高频 write(),大概率不是缓冲失效,而是其他机制在干预:

常见原因:
- 文件以 O_SYNC 或 O_DSYNC 标志打开(std::ofstream 无法指定,C 的 open() + fdopen() 才能控制)
- 使用了 std::endl —— 它强制 flush(),等价于 "\n" + flush();换成 "\n" 可避免意外刷盘
- 文件系统挂载参数含 sync 或 barrier=1(尤其在虚拟机或容器中)
- fclose() 或流析构时发生一次大 flush,误以为“一直没缓冲”,其实只是延迟到了最后

验证方法:
- 用 strace -e trace=write,fsync,fdatasync -s 16 ./a.out 区分是 write() 还是同步调用导致 IO
- 对比 std::ofstream 和 FILE* 版本的 write() 调用次数,确认差异来源

缓冲区大小和时机终究是权衡:太激进的缓冲会拖慢错误反馈(如磁盘满时延迟报错),而绕过 iostream 虽可控,却丢掉了类型安全和异常支持。真要压榨 IO 性能,往往得接受这种取舍。

相关文章

c++速学教程(入门到精通)
c++速学教程(入门到精通)

c++怎么学习?c++怎么入门?c++在哪学?c++怎么学才快?不用担心,这里为大家提供了c++速学教程(入门到精通),有需要的小伙伴保存下载就能学习啦!

下载

相关标签:

c++

本站声明:本文内容由网友自发贡献,版权归原作者所有,本站不承担相应法律责任。如您发现有涉嫌抄袭侵权的内容,请联系admin@php.cn

热门AI工具

更多
DeepSeek

DeepSeek是一款面向对话、写作、编程和推理场景的AI大模型工具。

Atoms
Atoms Hot

Atoms是一款AI智能体工具,第一支自动构建真实业务的 AI 团队。

讯飞绘文

讯飞绘文是一款由科大讯飞推出的一站式 AIGC 内容运营平台。

Laper
Laper Hot

Laper是专为编剧、导演和制片人推出的 AI 原生剧本创作工具。

Lovart
Lovart Hot

一款面向视觉设计创作的AI设计平台,可通过智能体和画布工作流辅助制作海报、Logo、网页、PPT及其他视觉内容。

豆包大模型

豆包大模型是一款由字节跳动推出的企业级大语言模型服务平台。

创客贴AI

创客贴AI是一款AI图像与设计工具,AI辅助的智能在线设计工具。

WorkBuddy

一款AI办公效率工具,主要用于腾讯云推出的AI原生桌面智能体工作台,适合需要提升相关任务效率的用户。

音述AI
音述AI Hot

一款AI音频处理工具,主要用于音述AI是一个以“用声音述说故事”为核心的 AI 音乐创作与声音分享社区,适合需要提升相关任务效率的用户。

相关专题

更多
fclose函数的用法
fclose函数的用法

fclose是一个C语言和C++中的标准库函数,用于关闭一个已经打开的文件,是文件操作中非常重要的一个函数,用于将文件流与底层文件系统分离,释放相关的资源。更多关于fclose函数的相关问题,详情请看本专题下面的文章。php中文网欢迎大家前来学习。

842

2023.11.30

硬盘接口类型介绍
硬盘接口类型介绍

硬盘接口类型有IDE、SATA、SCSI、Fibre Channel、USB、eSATA、mSATA、PCIe等等。详细介绍:1、IDE接口是一种并行接口,主要用于连接硬盘和光驱等设备,它主要有两种类型:ATA和ATAPI,IDE接口已经逐渐被SATA接口;2、SATA接口是一种串行接口,相较于IDE接口,它具有更高的传输速度、更低的功耗和更小的体积;3、SCSI接口等等。

3248

2023.10.19

PHP接口编写教程
PHP接口编写教程

本专题整合了PHP接口编写教程,阅读专题下面的文章了解更多详细内容。

5449

2025.10.17

php8.4实现接口限流的教程
php8.4实现接口限流的教程

PHP8.4本身不内置限流功能,需借助Redis(令牌桶)或Swoole(漏桶)实现;文件锁因I/O瓶颈、无跨机共享、秒级精度等缺陷不适用高并发场景。本专题为大家提供相关的文章、下载、课程内容,供大家免费下载体验。

3909

2025.12.29

java接口相关教程
java接口相关教程

本专题整合了java接口相关内容,阅读专题下面的文章了解更多详细内容。

506

2026.01.19

堆和栈的区别
堆和栈的区别

堆和栈的区别:1、内存分配方式不同;2、大小不同;3、数据访问方式不同;4、数据的生命周期。本专题为大家提供堆和栈的区别的相关的文章、下载、课程内容,供大家免费下载体验。

6967

2023.07.18

堆和栈区别
堆和栈区别

堆(Heap)和栈(Stack)是计算机中两种常见的内存分配机制。它们在内存管理的方式、分配方式以及使用场景上有很大的区别。本文将详细介绍堆和栈的特点、区别以及各自的使用场景。php中文网给大家带来了相关的教程以及文章欢迎大家前来学习阅读。

2868

2023.08.10

Go-Zero API开发使用教程
Go-Zero API开发使用教程

本专题聚焦Go-Zero的API开发,拆解.api描述文件的语法结构、路由与分组定义、参数绑定与校验规则,说明统一响应体、JWT鉴权、跨域与接口文档生成的落地方式,并给出网关聚合与接口测试的实践建议。

0

2026.11.12

Go-Zero安装与goctl环境配置教程
Go-Zero安装与goctl环境配置教程

本专题围绕Go-Zero的安装与工具链配置展开,讲清Go版本要求、goctl安装方式、代理镜像、protoc依赖与环境变量设置,说明多版本共存、升级回退与CI流水线安装的做法,并整理安装阶段的常见报错与验证步骤。

0

2026.11.12

热门下载

更多
网站特效
/
网站源码
/
网站素材
/
前端模板

精品课程

更多
相关推荐
/
热门推荐
/
最新课程
C++ Core Guidelines
C++ Core Guidelines

共0课时 | 0人学习

C++ Reference
C++ Reference

共0课时 | 0人学习

C++ 官方标准说明
C++ 官方标准说明

共0课时 | 0人学习

关于我们 免责申明 举报中心 意见反馈 讲师合作 广告合作 最新更新
php中文网:公益在线php培训,帮助PHP学习者快速成长!
关注服务号
PHP中文网订阅号
每天精选资源文章推送

Copyright 2014-2026 https://www.php.cn/ All Rights Reserved | php.cn