讲师中心 微信公众号
AI工具推荐 视频效率加速

C++如何构建基于io_uring的高性能异步磁盘I/O库?(Linux底层优化)

阿磊吖_1716

阿磊吖_1716

发布时间:2026-03-07 15:09:13

|

684人浏览过

|

来源于php中文网

原创

io_uring不能直接当“异步文件库”用,因其仅为内核提交/完成队列接口,不封装文件语义,需手动管理fd、对齐buffer、处理错误及上下文生命周期等。

c++如何构建基于io_uring的高性能异步磁盘i/o库?(linux底层优化)

io_uring 为什么不能直接当“异步文件库”用

因为 io_uring 本身只是内核提供的一组提交/完成队列接口,不封装文件语义。你调用 io_uring_prep_readv 前得自己 open() 文件、管理 fd、处理 O_DIRECT 对齐、应对 -EAGAIN 或 -EBUSY 返回——这些都不是“开箱即用”的异步 I/O,而是裸调度原语。

常见错误现象:io_uring_submit 返回成功,但读写没发生;或 read 完成后 buffer 里全是零;或高并发下大量 -EAGAIN 却没重试逻辑。

  • 必须显式设置 IORING_SETUP_IOPOLL(仅限支持轮询的设备)或 IORING_SETUP_SQPOLL(需 root),否则仍是 syscall 回退路径,性能无优势
  • O_DIRECT 是常态,意味着 buffer 地址和长度都必须页对齐(posix_memalign 分配),否则 io_uring 直接拒绝提交
  • 同一个 ring 不宜混用阻塞/非阻塞 fd:比如用 open("/proc/sys/...", O_RDONLY) 这种非存储 fd 提交到带 IOPOLL 的 ring,会静默失败

如何安全地复用 sqe 和管理 completion

手写库最容易崩在 sqe 生命周期错乱:提前覆盖未提交的 sqe,或 completion 回调里访问已释放的上下文。liburing 的 io_uring_get_sqe 只是取空位指针,不保活,也不自动关联用户数据。

使用场景:长连接服务中每个请求对应一次磁盘 read,需把 request 对象地址嵌入 sqe 的 user_data 字段,completion 时还原。

立即学习“C++免费学习笔记(深入)”;

Obsidian (Linux)
Obsidian (Linux)

操作 Obsidian 库(纯 Markdown 笔记),并通过 notesmd-cli 实现自动化。

下载
  • 永远检查 io_uring_get_sqe 返回值是否为 nullptr,满队列时它不阻塞,要主动 io_uring_submit 后再取
  • user_data 是唯一可靠的上下文传递通道,别依赖 sqe 内存地址——ring 内部可能移动或复用缓冲区
  • completion 处理必须区分 res < 0(错误)和 res == 0(EOF),尤其对普通文件;res > 0 才是真实字节数

Linux 5.19+ 的 IORING_OP_OPENAT2 能省多少事?

以前 open 文件必须走额外 syscall,破坏异步流水线;现在可把 open + read 合并在一个 submission 中,但代价是语义更重、容错更差。

参数差异明显:openat2 需构造 struct open_how,且 how.flags 里若设 O_PATH 或 O_NOFOLLOW,后续 read 会直接失败——不是报错,而是 res == -1 且 cqe->flags & IORING_CQE_F_MORE 为 false,容易误判为成功。

  • 仅当确定文件存在且权限固定时才用 IORING_OP_OPENAT2;动态路径或权限不确定场景,老老实实先 io_uring_prep_openat 再链式 submit
  • IORING_OP_OPENAT2 不支持 O_DIRECT,所以后续 read 仍需对齐 buffer,不能省掉 posix_memalign
  • glibc 尚未封装 openat2,需自己定义 struct open_how 并确保字段顺序与内核一致(__kernel_timespec 等细节易踩坑)

为什么 mmap + io_uring 通常比纯 io_uring 更慢

有人想用 mmap 预映射大文件,再靠 io_uring_prep_read 触发 page fault 异步加载——理论上零拷贝,实际几乎总是更慢。根本原因是 page fault 路径绕过了 io_uring 的 fast path,最终退化成普通 read() syscall。

性能影响具体体现在:相同负载下 CPU 使用率高 20%+,延迟 P99 上浮 3–5 倍,且 vmstat 显示 pgmajfault 暴涨。

  • 真正零拷贝场景只适用于 IORING_OP_PROVIDE_BUFFERS + 用户态 buffer pool,而非 mmap
  • 若必须 mmap,至少用 MADV_DONTNEED 主动释放冷页,避免 swap 压力干扰 io_uring 提交延迟
  • 不要在同一个文件上混用 mmap 和 io_uring read:内核 page cache 锁竞争会导致 completion 阻塞在 page_cache_get_page

最麻烦的其实是信号处理——io_uring 提交过程可能被 SIGUSR1 中断,此时 io_uring_submit 返回 -EINTR,但 sqe 已部分入队,重试前必须用 io_uring_sq_ready 检查真实状态,否则重复提交会触发内核 panic 日志。

相关文章

数码产品性能查询
数码产品性能查询

该软件包括了市面上所有手机CPU,手机跑分情况,电脑CPU,电脑产品信息等等,方便需要大家查阅数码产品最新情况,了解产品特性,能够进行对比选择最具性价比的商品。

下载

相关标签:

本站声明:本文内容由网友自发贡献,版权归原作者所有,本站不承担相应法律责任。如您发现有涉嫌抄袭侵权的内容,请联系admin@php.cn

热门AI工具

更多
讯飞绘文

讯飞绘文是一款由科大讯飞推出的一站式 AIGC 内容运营平台。

Lovart
Lovart Hot

一款面向视觉设计创作的AI设计平台,可通过智能体和画布工作流辅助制作海报、Logo、网页、PPT及其他视觉内容。

PixTV
PixTV Hot

PixTV是一款面向AIGC内容创作的AI视频生成工具。

UpDream
UpDream Hot

一款AI视频创作工具,主要用于哔哩哔哩推出的自研AI视频创作工具,适合需要提升相关任务效率的用户。

AionClaw
AionClaw Hot

AionClaw是一款面向办公、创作和编程任务的AI桌面智能体。

DeepSeek

DeepSeek是一款面向对话、写作、编程和推理场景的AI大模型工具。

豆包大模型

豆包大模型是一款由字节跳动推出的企业级大语言模型服务平台。

WorkBuddy

一款AI办公效率工具,主要用于腾讯云推出的AI原生桌面智能体工作台,适合需要提升相关任务效率的用户。

咔片AIPPT

一款在线AI演示文稿制作工具,可根据主题和内容需求辅助生成PPT结构与页面,提高演示材料制作效率。

相关专题

更多
C++ 智能指针与现代内存管理
C++ 智能指针与现代内存管理

深入讲解 C++ 现代内存管理的核心工具——智能指针,涵盖 unique_ptr 独占所有权语义、shared_ptr 引用计数机制与循环引用问题、weak_ptr 弱引用的应用场景、make_unique/make_shared 工厂函数的性能优势、自定义删除器的编写、RAII 资源管理思想的实践,以及从裸指针迁移到智能指针的重构策略,帮助开发者编写安全无泄漏的现代 C++ 代码。

359

2026.04.23

硬盘接口类型介绍
硬盘接口类型介绍

硬盘接口类型有IDE、SATA、SCSI、Fibre Channel、USB、eSATA、mSATA、PCIe等等。详细介绍:1、IDE接口是一种并行接口,主要用于连接硬盘和光驱等设备,它主要有两种类型:ATA和ATAPI,IDE接口已经逐渐被SATA接口;2、SATA接口是一种串行接口,相较于IDE接口,它具有更高的传输速度、更低的功耗和更小的体积;3、SCSI接口等等。

3148

2023.10.19

PHP接口编写教程
PHP接口编写教程

本专题整合了PHP接口编写教程,阅读专题下面的文章了解更多详细内容。

4949

2025.10.17

php8.4实现接口限流的教程
php8.4实现接口限流的教程

PHP8.4本身不内置限流功能,需借助Redis(令牌桶)或Swoole(漏桶)实现;文件锁因I/O瓶颈、无跨机共享、秒级精度等缺陷不适用高并发场景。本专题为大家提供相关的文章、下载、课程内容,供大家免费下载体验。

3789

2025.12.29

java接口相关教程
java接口相关教程

本专题整合了java接口相关内容,阅读专题下面的文章了解更多详细内容。

446

2026.01.19

磁盘配额是什么
磁盘配额是什么

磁盘配额是计算机中指定磁盘的储存限制,就是管理员可以为用户所能使用的磁盘空间进行配额限制,每一用户只能使用最大配额范围内的磁盘空间。php中文网为大家提供各种磁盘配额相关的内容,教程,供大家免费下载安装。

4150

2023.06.21

如何安装LINUX
如何安装LINUX

本站专题提供如何安装LINUX的相关教程文章,还有相关的下载、课程,大家可以免费体验。

3513

2023.06.29

linux find
linux find

find是linux命令,它将档案系统内符合 expression 的档案列出来。可以指要档案的名称、类别、时间、大小、权限等不同资讯的组合,只有完全相符的才会被列出来。find根据下列规则判断 path 和 expression,在命令列上第一个 - ( ) , ! 之前的部分为 path,之后的是 expression。还有指DOS 命令 find,Excel 函数 find等。本站专题提供linux find相关教程文章,还有相关

2733

2023.06.30

Gradle插件开发入门教程
Gradle插件开发入门教程

本专题介绍Gradle插件开发的基本流程,涵盖插件类编写、自定义任务注册、扩展参数设计和插件应用方法,帮助你理解插件如何组织构建逻辑,减少多个项目之间的重复配置。

0

2026.10.22

热门下载

更多
网站特效
/
网站源码
/
网站素材
/
前端模板

精品课程

更多
相关推荐
/
热门推荐
/
最新课程
Python uv官方安装与入门文档
Python uv官方安装与入门文档

共0课时 | 0人学习

Buffalo框架快速入门指南
Buffalo框架快速入门指南

共0课时 | 0人学习

Valgrind支持平台说明
Valgrind支持平台说明

共0课时 | 0人学习

关于我们 免责申明 举报中心 意见反馈 讲师合作 广告合作 最新更新
php中文网:公益在线php培训,帮助PHP学习者快速成长!
关注服务号
PHP中文网订阅号
每天精选资源文章推送

Copyright 2014-2026 https://www.php.cn/ All Rights Reserved | php.cn