0

0

c++怎么实现一个无锁队列_c++多线程高性能无锁数据结构设计

穿越時空

穿越時空

发布时间:2025-11-12 20:19:29

|

576人浏览过

|

来源于php中文网

原创

答案:基于循环数组的单生产者单消费者无锁队列利用原子操作和内存序控制实现高效并发,通过位运算优化索引计算,memory_order_acquire与release保证同步,避免伪共享并支持多线程扩展,适用于高性能场景。

c++怎么实现一个无锁队列_c++多线程高性能无锁数据结构设计

实现一个高性能的无锁队列(Lock-Free Queue)是C++多线程编程中的高级话题,主要依赖原子操作和内存序控制来避免使用互斥锁,从而提升并发性能。下面介绍一种经典的单生产者单消费者(SPSC)场景下的无锁队列实现思路,并说明其关键点。

基本原理与设计思路

无锁队列的核心是利用std::atomic提供的原子操作来修改指针或索引,确保多个线程在不加锁的情况下安全访问共享数据结构。常见实现方式包括基于链表的节点队列和基于循环数组的环形缓冲区。

对于高性能场景,基于固定大小循环数组的无锁队列更受欢迎,因为它具有更好的缓存局部性,减少动态内存分配开销。

单生产者单消费者无锁队列实现(基于环形缓冲)

以下是一个简化但实用的SPSC无锁队列实现:

立即学习C++免费学习笔记(深入)”;

template
class LockFreeQueue {
    static_assert((Size & (Size - 1)) == 0, "Size must be power of 2");
std::arrayzuojiankuohaophpcnT, Sizeyoujiankuohaophpcn buffer_;
std::atomiczuojiankuohaophpcnsize_tyoujiankuohaophpcn head_ {0}; // 生产者写入位置
std::atomiczuojiankuohaophpcnsize_tyoujiankuohaophpcn tail_ {0}; // 消费者读取位置

public: bool push(const T& data) { size_t currenthead = head.load(std::memory_order_relaxed); size_t next_head = (current_head + 1) & (Size - 1);

    if (next_head == tail_.load(std::memory_order_acquire)) {
        return false; // 队列满
    }

    buffer_[current_head] = data;
    head_.store(next_head, std::memory_order_release);
    return true;
}

bool pop(T& data) {
    size_t current_tail = tail_.load(std::memory_order_relaxed);
    if (current_tail == head_.load(std::memory_order_acquire)) {
        return false; // 队列空
    }

    data = buffer_[current_tail];
    size_t next_tail = (current_tail + 1) & (Size - 1);
    tail_.store(next_tail, std::memory_order_release);
    return true;
}

};

Revid AI
Revid AI

AI短视频生成平台

下载

关键点说明:

  • 容量为2的幂次:通过位运算& (Size - 1)替代取模,提高性能。
  • memory_order选择memory_order_acquirememory_order_release保证跨线程的同步语义,防止重排序问题。
  • SPSC安全性:由于只有一个生产者和一个消费者,各自独占head或tail,不会出现竞态。

多生产者或多消费者场景的挑战

当扩展到多生产者(MPSC)或多消费者(MSPC)时,简单的原子计数无法保证安全。需要更复杂的机制:

  • 使用compare_exchange_weak实现CAS循环,确保多个线程竞争写入时的一致性。
  • 引入padding防止伪共享(False Sharing),例如对head/tail变量进行缓存行对齐。
  • 考虑采用已验证的算法如Dmitry Vyukov的Bounded MPMC Queue。

例如,在MPSC中push可能这样改写:

bool push(const T& data) {
    size_t current_head;
    size_t next_head;
    do {
        current_head = head_.load(std::memory_order_relaxed);
        next_head = (current_head + 1) & (Size - 1);
        if (next_head == tail_.load(std::memory_order_acquire))
            return false;
    } while (!head_.compare_exchange_weak(current_head, next_head,
                                          std::memory_order_release,
                                          std::memory_order_relaxed));
buffer_[current_head] = data;
return true;

}

性能优化建议

  • 避免频繁的CAS失败:合理设置队列大小,减少冲突。
  • 使用内存池管理节点(链表式队列)以降低动态分配开销。
  • 添加pause指令(如_mm_pause)在自旋等待中降低CPU功耗。
  • 考虑使用编译器内置函数或平台特定指令进一步优化。

基本上就这些。无锁队列的设计需要深入理解内存模型和硬件行为,建议在实际使用前充分测试边界情况和性能表现。对于大多数应用,也可以直接使用成熟的库如absl::Mutexfolly::MPMCQueue,它们经过广泛验证且性能优秀。

相关专题

更多
c语言const用法
c语言const用法

const是关键字,可以用于声明常量、函数参数中的const修饰符、const修饰函数返回值、const修饰指针。详细介绍:1、声明常量,const关键字可用于声明常量,常量的值在程序运行期间不可修改,常量可以是基本数据类型,如整数、浮点数、字符等,也可是自定义的数据类型;2、函数参数中的const修饰符,const关键字可用于函数的参数中,表示该参数在函数内部不可修改等等。

519

2023.09.20

c语言const用法
c语言const用法

const是关键字,可以用于声明常量、函数参数中的const修饰符、const修饰函数返回值、const修饰指针。详细介绍:1、声明常量,const关键字可用于声明常量,常量的值在程序运行期间不可修改,常量可以是基本数据类型,如整数、浮点数、字符等,也可是自定义的数据类型;2、函数参数中的const修饰符,const关键字可用于函数的参数中,表示该参数在函数内部不可修改等等。

519

2023.09.20

treenode的用法
treenode的用法

​在计算机编程领域,TreeNode是一种常见的数据结构,通常用于构建树形结构。在不同的编程语言中,TreeNode可能有不同的实现方式和用法,通常用于表示树的节点信息。更多关于treenode相关问题详情请看本专题下面的文章。php中文网欢迎大家前来学习。

529

2023.12.01

C++ 高效算法与数据结构
C++ 高效算法与数据结构

本专题讲解 C++ 中常用算法与数据结构的实现与优化,涵盖排序算法(快速排序、归并排序)、查找算法、图算法、动态规划、贪心算法等,并结合实际案例分析如何选择最优算法来提高程序效率。通过深入理解数据结构(链表、树、堆、哈希表等),帮助开发者提升 在复杂应用中的算法设计与性能优化能力。

6

2025.12.22

线程和进程的区别
线程和进程的区别

线程和进程的区别:线程是进程的一部分,用于实现并发和并行操作,而线程共享进程的资源,通信更方便快捷,切换开销较小。本专题为大家提供线程和进程区别相关的各种文章、以及下载和课程。

471

2023.08.10

Python 多线程与异步编程实战
Python 多线程与异步编程实战

本专题系统讲解 Python 多线程与异步编程的核心概念与实战技巧,包括 threading 模块基础、线程同步机制、GIL 原理、asyncio 异步任务管理、协程与事件循环、任务调度与异常处理。通过实战示例,帮助学习者掌握 如何构建高性能、多任务并发的 Python 应用。

107

2025.12.24

css中的padding属性作用
css中的padding属性作用

在CSS中,padding属性用于设置元素的内边距。想了解更多padding的相关内容,可以阅读本专题下面的文章。

128

2023.12.07

页面置换算法
页面置换算法

页面置换算法是操作系统中用来决定在内存中哪些页面应该被换出以便为新的页面提供空间的算法。本专题为大家提供页面置换算法的相关文章,大家可以免费体验。

387

2023.08.14

php源码安装教程大全
php源码安装教程大全

本专题整合了php源码安装教程,阅读专题下面的文章了解更多详细内容。

7

2025.12.31

热门下载

更多
网站特效
/
网站源码
/
网站素材
/
前端模板

精品课程

更多
相关推荐
/
热门推荐
/
最新课程
10分钟--Midjourney创作自己的漫画
10分钟--Midjourney创作自己的漫画

共1课时 | 0.1万人学习

Midjourney 关键词系列整合
Midjourney 关键词系列整合

共13课时 | 0.9万人学习

AI绘画教程
AI绘画教程

共2课时 | 0.2万人学习

关于我们 免责申明 举报中心 意见反馈 讲师合作 广告合作 最新更新
php中文网:公益在线php培训,帮助PHP学习者快速成长!
关注服务号 技术交流群
PHP中文网订阅号
每天精选资源文章推送

Copyright 2014-2026 https://www.php.cn/ All Rights Reserved | php.cn | 湘ICP备2023035733号