讲师中心 微信公众号
AI工具推荐 视频效率加速

C++如何实现一个双缓冲队列_C++无锁或低锁竞争下的高性能数据交换模式

夜瑶君_9042

夜瑶君_9042

发布时间:2025-11-25 18:16:02

|

847人浏览过

|

来源于php中文网

原创

双缓冲队列通过双缓冲区交替读写实现低锁竞争,适用于高并发下批量数据交换。生产者向当前写缓冲区写入,消费者从读缓冲区批量获取数据,通过原子操作交换缓冲区角色,减少锁争用。C++ 示例使用 std::atomic 控制写索引和数据就绪状态,vector::swap 快速移交数据,适合日志系统等生产者多、消费者少且允许短时延迟的场景。优化方向包括预分配内存、无锁 ring buffer 和避免伪共享。

c++如何实现一个双缓冲队列_c++无锁或低锁竞争下的高性能数据交换模式

在高并发场景下,线程间频繁的数据交换容易成为性能瓶颈。传统加锁队列在多线程争用时会产生大量上下文切换和阻塞等待。双缓冲队列(Double Buffer Queue)是一种低锁竞争甚至无锁的高性能数据交换模式,特别适合生产者多、消费者少,或批量处理的场景。

双缓冲队列的基本原理

双缓冲队列的核心思想是维护两个缓冲区(Buffer A 和 Buffer B),一个用于写入(生产者操作),另一个用于读取(消费者操作)。生产者始终向“当前写缓冲区”追加数据,而消费者从“当前读缓冲区”批量处理数据。当需要切换时,通过原子操作交换两个缓冲区的角色,从而实现读写分离,大幅减少锁的竞争。

关键点:

  • 读写操作分别在不同的缓冲区进行,避免同时访问同一块内存。
  • 交换缓冲区的操作尽可能快,并可通过原子指针交换实现无锁切换。
  • 适用于允许短暂延迟消费的场景(如每毫秒批量处理一次)。

C++ 实现示例(低锁版本)

以下是一个基于 std::atomic 和双 vector 缓冲的低锁实现:

立即学习“C++免费学习笔记(深入)”;

Obsidian (Linux)
Obsidian (Linux)

操作 Obsidian 库(纯 Markdown 笔记),并通过 notesmd-cli 实现自动化。

下载
#include
#include
#include
#include

template
class DoubleBufferQueue {
private:
    std::vector buffer_[2];
    std::atomic write_index_{0}; // 当前写入的是哪个buffer
    std::atomic data_ready_{false}; // 是否有数据待消费

public:
    void push(const T& item) {
        int idx = write_index_.load();
        buffer_[idx].push_back(item);
    }

    void push(T&& item) {
        int idx = write_index_.load();
        buffer_[idx].push_back(std::move(item));
    }

    // 被消费者调用,交换缓冲区并获取数据
    std::vector swap() {
        int read_idx = write_index_.fetch_xor(1); // 原子翻转写索引
        data_ready_.store(!buffer_[read_idx].empty());

        std::vector tmp;
        tmp.swap(buffer_[read_idx]); // 快速交换内容
        return tmp;
    }

    bool has_data() const {
        return data_ready_.load();
    }

    size_t size(int buf = 0) const {
        return buffer_[buf].size();
    }
};

说明:

  • write_index_ 表示当前哪个 buffer 接收写入,通过 fetch_xor(1) 原子翻转实现切换。
  • swap() 是消费者调用的方法,它交换当前读取的 buffer 并返回其全部内容。
  • data_ready_ 可供消费者快速判断是否有新数据,避免空轮询。
  • 生产者几乎无锁,仅涉及原子 load;消费者在 swap 时也无需锁,vector::swap 是常数时间。

适用场景与优化建议

这种模式适合如下情况:

  • 生产者线程多,消费者线程少(如日志系统)。
  • 允许微秒到毫秒级延迟消费。
  • 数据以批量形式处理更高效(如网络包聚合、事件批处理)。

可进一步优化的方向:

  • 使用无锁 ring buffer 替代 vector,限制最大容量,避免动态扩容。
  • 加入内存屏障控制,确保跨核可见性。
  • 结合条件变量或 eventfd(Linux)通知消费者,避免 busy-wait。
  • 对 buffer 预分配内存(reserve),减少 push 时的内存分配开销。

基本上就这些。双缓冲队列不是完全无锁(atomic 操作本质是带硬件同步的),但将锁的影响降到了极低水平,尤其适合高吞吐、低延迟要求的中间层数据交换。实现不复杂但容易忽略内存顺序和缓存伪共享问题。

相关文章

数码产品性能查询
数码产品性能查询

该软件包括了市面上所有手机CPU,手机跑分情况,电脑CPU,电脑产品信息等等,方便需要大家查阅数码产品最新情况,了解产品特性,能够进行对比选择最具性价比的商品。

下载

相关标签:

本站声明:本文内容由网友自发贡献,版权归原作者所有,本站不承担相应法律责任。如您发现有涉嫌抄袭侵权的内容,请联系admin@php.cn

热门AI工具

更多
小橡皮AI

一款AI工具,主要用于小橡皮一键去AI味,将机器味重的内容改得更有活人感,防止因为 AI 内容被平台打上 AI 标签,以及限流,适合需要提升相关任务效率的用户。

二狗PPT
二狗PPT Hot

一款AI演示文稿工具,主要用于专为中式职场打造的AI PPT生成工具,适合需要提升相关任务效率的用户。

UpDream
UpDream Hot

一款AI视频创作工具,主要用于哔哩哔哩推出的自研AI视频创作工具,适合需要提升相关任务效率的用户。

WorkBuddy

一款AI办公效率工具,主要用于腾讯云推出的AI原生桌面智能体工作台,适合需要提升相关任务效率的用户。

墨刀AI
墨刀AI Hot

一款AI图像与设计工具,主要用于产品经理的专属智能体,适合需要提升相关任务效率的用户。

豆包大模型

豆包大模型是一款由字节跳动推出的企业级大语言模型服务平台。

切问学术

切问学术是一款AI论文写作工具,复旦大学NLP团队推出的AI学术智能体。

讯飞智作

讯飞智作是一款AI视频创作工具,AI文本配音工具,数字人课程、营销视频制作。

DeepSeek

DeepSeek是一款面向对话、写作、编程和推理场景的AI大模型工具。

相关专题

更多
c语言const用法
c语言const用法

const是关键字,可以用于声明常量、函数参数中的const修饰符、const修饰函数返回值、const修饰指针。详细介绍:1、声明常量,const关键字可用于声明常量,常量的值在程序运行期间不可修改,常量可以是基本数据类型,如整数、浮点数、字符等,也可是自定义的数据类型;2、函数参数中的const修饰符,const关键字可用于函数的参数中,表示该参数在函数内部不可修改等等。

2318

2023.09.20

c语言const用法
c语言const用法

const是关键字,可以用于声明常量、函数参数中的const修饰符、const修饰函数返回值、const修饰指针。详细介绍:1、声明常量,const关键字可用于声明常量,常量的值在程序运行期间不可修改,常量可以是基本数据类型,如整数、浮点数、字符等,也可是自定义的数据类型;2、函数参数中的const修饰符,const关键字可用于函数的参数中,表示该参数在函数内部不可修改等等。

2318

2023.09.20

string转int
string转int

在编程中,我们经常会遇到需要将字符串(str)转换为整数(int)的情况。这可能是因为我们需要对字符串进行数值计算,或者需要将用户输入的字符串转换为整数进行处理。php中文网给大家带来了相关的教程以及文章,欢迎大家前来学习阅读。

6839

2023.08.02

int占多少字节
int占多少字节

int占4个字节,意味着一个int变量可以存储范围在-2,147,483,648到2,147,483,647之间的整数值,在某些情况下也可能是2个字节或8个字节,int是一种常用的数据类型,用于表示整数,需要根据具体情况选择合适的数据类型,以确保程序的正确性和性能。本专题为大家提供相关的文章、下载、课程内容,供大家免费下载体验。

3285

2024.08.29

c++怎么把double转成int
c++怎么把double转成int

本专题整合了 c++ double相关教程,阅读专题下面的文章了解更多详细内容。

4268

2025.08.29

C++中int的含义
C++中int的含义

本专题整合了C++中int相关内容,阅读专题下面的文章了解更多详细内容。

2905

2025.08.29

c++怎么把double转成int
c++怎么把double转成int

本专题整合了 c++ double相关教程,阅读专题下面的文章了解更多详细内容。

4268

2025.08.29

C++中int、float和double的区别
C++中int、float和double的区别

本专题整合了c++中int和double的区别,阅读专题下面的文章了解更多详细内容。

824

2025.10.23

Vite 项目如何打包和部署
Vite 项目如何打包和部署

Vite项目打包部署专题汇集生产构建、产物预览、输出目录、资源路径、Nginx与GitHub Pages部署及常见白屏和路由404问题的已审核文章,帮助读者完成上线流程。

60

2026.10.28

热门下载

更多
网站特效
/
网站源码
/
网站素材
/
前端模板

精品课程

更多
相关推荐
/
热门推荐
/
最新课程
Python uv官方安装与入门文档
Python uv官方安装与入门文档

共0课时 | 0人学习

Buffalo框架快速入门指南
Buffalo框架快速入门指南

共0课时 | 0人学习

Valgrind支持平台说明
Valgrind支持平台说明

共0课时 | 0人学习

关于我们 免责申明 举报中心 意见反馈 讲师合作 广告合作 最新更新
php中文网:公益在线php培训,帮助PHP学习者快速成长!
关注服务号
PHP中文网订阅号
每天精选资源文章推送

Copyright 2014-2026 https://www.php.cn/ All Rights Reserved | php.cn