0

0

C++如何实现一个双缓冲队列_C++无锁或低锁竞争下的高性能数据交换模式

裘德小鎮的故事

裘德小鎮的故事

发布时间:2025-11-25 18:16:02

|

847人浏览过

|

来源于php中文网

原创

双缓冲队列通过双缓冲区交替读写实现低锁竞争,适用于高并发下批量数据交换。生产者向当前写缓冲区写入,消费者从读缓冲区批量获取数据,通过原子操作交换缓冲区角色,减少锁争用。C++ 示例使用 std::atomic 控制写索引和数据就绪状态,vector::swap 快速移交数据,适合日志系统等生产者多、消费者少且允许短时延迟的场景。优化方向包括预分配内存、无锁 ring buffer 和避免伪共享。

c++如何实现一个双缓冲队列_c++无锁或低锁竞争下的高性能数据交换模式

在高并发场景下,线程间频繁的数据交换容易成为性能瓶颈。传统加锁队列在多线程争用时会产生大量上下文切换和阻塞等待。双缓冲队列(Double Buffer Queue)是一种低锁竞争甚至无锁的高性能数据交换模式,特别适合生产者多、消费者少,或批量处理的场景。

双缓冲队列的基本原理

双缓冲队列的核心思想是维护两个缓冲区(Buffer A 和 Buffer B),一个用于写入(生产者操作),另一个用于读取(消费者操作)。生产者始终向“当前写缓冲区”追加数据,而消费者从“当前读缓冲区”批量处理数据。当需要切换时,通过原子操作交换两个缓冲区的角色,从而实现读写分离,大幅减少锁的竞争。

关键点:

  • 读写操作分别在不同的缓冲区进行,避免同时访问同一块内存。
  • 交换缓冲区的操作尽可能快,并可通过原子指针交换实现无锁切换。
  • 适用于允许短暂延迟消费的场景(如每毫秒批量处理一次)。

C++ 实现示例(低锁版本)

以下是一个基于 std::atomic 和双 vector 缓冲的低锁实现:

立即学习C++免费学习笔记(深入)”;

Bing图像创建器
Bing图像创建器

必应出品基于DALL·E的AI绘图工具

下载
#include
#include
#include
#include

template
class DoubleBufferQueue {
private:
    std::vector buffer_[2];
    std::atomic write_index_{0}; // 当前写入的是哪个buffer
    std::atomic data_ready_{false}; // 是否有数据待消费

public:
    void push(const T& item) {
        int idx = write_index_.load();
        buffer_[idx].push_back(item);
    }

    void push(T&& item) {
        int idx = write_index_.load();
        buffer_[idx].push_back(std::move(item));
    }

    // 被消费者调用,交换缓冲区并获取数据
    std::vector swap() {
        int read_idx = write_index_.fetch_xor(1); // 原子翻转写索引
        data_ready_.store(!buffer_[read_idx].empty());

        std::vector tmp;
        tmp.swap(buffer_[read_idx]); // 快速交换内容
        return tmp;
    }

    bool has_data() const {
        return data_ready_.load();
    }

    size_t size(int buf = 0) const {
        return buffer_[buf].size();
    }
};

说明:

  • write_index_ 表示当前哪个 buffer 接收写入,通过 fetch_xor(1) 原子翻转实现切换。
  • swap() 是消费者调用的方法,它交换当前读取的 buffer 并返回其全部内容。
  • data_ready_ 可供消费者快速判断是否有新数据,避免空轮询。
  • 生产者几乎无锁,仅涉及原子 load;消费者在 swap 时也无需锁,vector::swap 是常数时间。

适用场景与优化建议

这种模式适合如下情况:

  • 生产者线程多,消费者线程少(如日志系统)。
  • 允许微秒到毫秒级延迟消费。
  • 数据以批量形式处理更高效(如网络包聚合、事件批处理)。

可进一步优化的方向:

  • 使用无锁 ring buffer 替代 vector,限制最大容量,避免动态扩容。
  • 加入内存屏障控制,确保跨核可见性。
  • 结合条件变量或 eventfd(Linux)通知消费者,避免 busy-wait。
  • 对 buffer 预分配内存(reserve),减少 push 时的内存分配开销。

基本上就这些。双缓冲队列不是完全无锁(atomic 操作本质是带硬件同步的),但将锁的影响降到了极低水平,尤其适合高吞吐、低延迟要求的中间层数据交换。实现不复杂但容易忽略内存顺序和缓存伪共享问题。

相关专题

更多
c语言const用法
c语言const用法

const是关键字,可以用于声明常量、函数参数中的const修饰符、const修饰函数返回值、const修饰指针。详细介绍:1、声明常量,const关键字可用于声明常量,常量的值在程序运行期间不可修改,常量可以是基本数据类型,如整数、浮点数、字符等,也可是自定义的数据类型;2、函数参数中的const修饰符,const关键字可用于函数的参数中,表示该参数在函数内部不可修改等等。

524

2023.09.20

c语言const用法
c语言const用法

const是关键字,可以用于声明常量、函数参数中的const修饰符、const修饰函数返回值、const修饰指针。详细介绍:1、声明常量,const关键字可用于声明常量,常量的值在程序运行期间不可修改,常量可以是基本数据类型,如整数、浮点数、字符等,也可是自定义的数据类型;2、函数参数中的const修饰符,const关键字可用于函数的参数中,表示该参数在函数内部不可修改等等。

524

2023.09.20

string转int
string转int

在编程中,我们经常会遇到需要将字符串(str)转换为整数(int)的情况。这可能是因为我们需要对字符串进行数值计算,或者需要将用户输入的字符串转换为整数进行处理。php中文网给大家带来了相关的教程以及文章,欢迎大家前来学习阅读。

318

2023.08.02

int占多少字节
int占多少字节

int占4个字节,意味着一个int变量可以存储范围在-2,147,483,648到2,147,483,647之间的整数值,在某些情况下也可能是2个字节或8个字节,int是一种常用的数据类型,用于表示整数,需要根据具体情况选择合适的数据类型,以确保程序的正确性和性能。本专题为大家提供相关的文章、下载、课程内容,供大家免费下载体验。

538

2024.08.29

c++怎么把double转成int
c++怎么把double转成int

本专题整合了 c++ double相关教程,阅读专题下面的文章了解更多详细内容。

52

2025.08.29

C++中int的含义
C++中int的含义

本专题整合了C++中int相关内容,阅读专题下面的文章了解更多详细内容。

197

2025.08.29

c++怎么把double转成int
c++怎么把double转成int

本专题整合了 c++ double相关教程,阅读专题下面的文章了解更多详细内容。

52

2025.08.29

C++中int、float和double的区别
C++中int、float和double的区别

本专题整合了c++中int和double的区别,阅读专题下面的文章了解更多详细内容。

99

2025.10.23

高德地图升级方法汇总
高德地图升级方法汇总

本专题整合了高德地图升级相关教程,阅读专题下面的文章了解更多详细内容。

43

2026.01.16

热门下载

更多
网站特效
/
网站源码
/
网站素材
/
前端模板

精品课程

更多
相关推荐
/
热门推荐
/
最新课程
PostgreSQL 教程
PostgreSQL 教程

共48课时 | 7.3万人学习

Git 教程
Git 教程

共21课时 | 2.7万人学习

关于我们 免责申明 举报中心 意见反馈 讲师合作 广告合作 最新更新
php中文网:公益在线php培训,帮助PHP学习者快速成长!
关注服务号 技术交流群
PHP中文网订阅号
每天精选资源文章推送

Copyright 2014-2026 https://www.php.cn/ All Rights Reserved | php.cn | 湘ICP备2023035733号