0

0

c++怎么实现小对象内存池_c++ 内存碎片优化与预分配技术【详解】

尼克

尼克

发布时间:2026-01-16 13:47:02

|

397人浏览过

|

来源于php中文网

原创

std::allocator在高频小对象场景易致内存碎片和元数据开销过大,引发性能问题;应依profiler数据判断是否需内存池;简易线程安全对象池可用placement new+静态数组实现;std::pmr::monotonic_buffer_resource不适用于长期服务因不可收缩。

c++怎么实现小对象内存池_c++ 内存碎片优化与预分配技术【详解】

为什么 std::allocator 默认行为在高频小对象场景下容易出问题

频繁调用 new / delete 分配小于 64 字节的对象(如 std::shared_ptr 控制块、事件节点、链表节点),会快速产生内存碎片,且堆管理器的元数据开销可能比对象本身还大。glibc 的 malloc 在小块分配时默认走 fastbinsunsorted bin,但线程竞争、合并延迟、缓存行对齐等因素会让实际分配延迟波动明显。

关键不是“能不能用”,而是“是否值得自己管”——当 profiler 显示 operator new 占 CPU >5% 或 valgrind --tool=massif 报告堆峰值远高于活跃对象总大小时,就该考虑内存池了。

用 placement new + 静态数组实现最简线程安全对象池

不依赖第三方库、不引入虚函数、不触发全局堆操作,适合嵌入式或低延迟场景。核心是预分配一块连续内存,手动管理 free list。

template
class SimpleObjectPool {
    alignas(T) char memory_[sizeof(T) * 256];
    std::atomic free_count_{256};
    std::atomic next_free_{0};
    std::atomic in_use_[256] = {};

public: T allocate() { size_t idx = nextfree.fetch_add(1, std::memory_order_relaxed); if (idx >= 256 || !inuse[idx].exchange(true, std::memory_orderacquire)) { return nullptr; // 已满或被其他线程抢先占用 } return new (memory + idx sizeof(T)) T(); }

void deallocate(T* ptr) {
    size_t idx = (reinterpret_cast(ptr) - memory_) / sizeof(T);
    if (idx < 256) {
        ptr->~T();
        in_use_[idx].store(false, std::memory_order_release);
    }
}

};

立即学习C++免费学习笔记(深入)”;

注意点:

  • alignas(T) 必须显式指定,否则 placement new 可能写到未对齐地址,触发 x86 上的性能惩罚或 ARM 上的硬件异常
  • fetch_addrelaxed 是因后续有 exchange(true) 做 acquire 栅栏,避免重复分配同一槽位
  • 没做内存回收重用逻辑(即 free list 链表),靠数组索引轮询;若需 LIFO 局部性,可改用式 top 指针 + CAS

std::pmr::monotonic_buffer_resource 为何不适合长期运行的服务

它是一次性增长、不可收缩的内存池,适用于“分配一批、用完即弃”的场景(如 HTTP 请求生命周期)。但在常驻进程里反复调用 pool.release() 会导致物理内存不归还 OS,top_ 指针只增不减。

HeyGen
HeyGen

HeyGen是一个AI虚拟数字人生成平台,可以根据用户提供的内容,快速生成高质量的虚拟发言人视频,支持数字化身、文本转视频和视频翻译。

下载

典型误用:

std::pmr::monotonic_buffer_resource pool{1024 * 1024};
std::pmr::vector v{&pool};
for (int i = 0; i < 1000000; ++i) {
    v.push_back(i); // 每次扩容都新申请 chunk,旧 chunk 不释放
}
pool.release(); // 仅重置内部指针,底层 mmap 内存仍被持有

替代方案:

  • std::pmr::synchronized_pool_resource(C++17),它内部维护多个固定尺寸的 segregated free lists,支持跨线程复用与部分回收
  • 若需精确控制,直接封装 mmap(MAP_ANONYMOUS | MAP_PRIVATE) + bitmap 管理,绕过 libc malloc

释放时忘记调用析构函数是最隐蔽的崩溃源头

内存池只管内存,不管对象生命周期。用 placement new 构造的对象,必须显式调用析构函数,否则:

  • std::stringstd::vector 成员的对象会泄漏其内部堆内存
  • 带 RAII 锁、文件句柄、引用计数的对象无法释放资源
  • ASan 会报 use-after-free,因为对象内存虽被复用,但旧状态未清理

正确模式:

T* p = pool.allocate();
if (p) {
    new (p) T{args...}; // 构造
    // ... use p ...
    p->~T();            // 必须显式析构!
    pool.deallocate(p);
}

真正难的是把这套逻辑封装进智能指针或容器——比如自定义 std::pmr::polymorphic_allocator 时,它的 destroy 方法必须转发到对象析构,否则 std::pmr::vector resize 就会漏掉旧元素析构。

别指望编译器帮你补析构:内存池分配的内存不在 operator delete 覆盖范围内,delete p 会直接 crash。

相关专题

更多
string转int
string转int

在编程中,我们经常会遇到需要将字符串(str)转换为整数(int)的情况。这可能是因为我们需要对字符串进行数值计算,或者需要将用户输入的字符串转换为整数进行处理。php中文网给大家带来了相关的教程以及文章,欢迎大家前来学习阅读。

315

2023.08.02

堆和栈的区别
堆和栈的区别

堆和栈的区别:1、内存分配方式不同;2、大小不同;3、数据访问方式不同;4、数据的生命周期。本专题为大家提供堆和栈的区别的相关的文章、下载、课程内容,供大家免费下载体验。

389

2023.07.18

堆和栈区别
堆和栈区别

堆(Heap)和栈(Stack)是计算机中两种常见的内存分配机制。它们在内存管理的方式、分配方式以及使用场景上有很大的区别。本文将详细介绍堆和栈的特点、区别以及各自的使用场景。php中文网给大家带来了相关的教程以及文章欢迎大家前来学习阅读。

572

2023.08.10

堆和栈的区别
堆和栈的区别

堆和栈的区别:1、内存分配方式不同;2、大小不同;3、数据访问方式不同;4、数据的生命周期。本专题为大家提供堆和栈的区别的相关的文章、下载、课程内容,供大家免费下载体验。

389

2023.07.18

堆和栈区别
堆和栈区别

堆(Heap)和栈(Stack)是计算机中两种常见的内存分配机制。它们在内存管理的方式、分配方式以及使用场景上有很大的区别。本文将详细介绍堆和栈的特点、区别以及各自的使用场景。php中文网给大家带来了相关的教程以及文章欢迎大家前来学习阅读。

572

2023.08.10

线程和进程的区别
线程和进程的区别

线程和进程的区别:线程是进程的一部分,用于实现并发和并行操作,而线程共享进程的资源,通信更方便快捷,切换开销较小。本专题为大家提供线程和进程区别相关的各种文章、以及下载和课程。

480

2023.08.10

数据库Delete用法
数据库Delete用法

数据库Delete用法:1、删除单条记录;2、删除多条记录;3、删除所有记录;4、删除特定条件的记录。更多关于数据库Delete的内容,大家可以访问下面的文章。

269

2023.11.13

drop和delete的区别
drop和delete的区别

drop和delete的区别:1、功能与用途;2、操作对象;3、可逆性;4、空间释放;5、执行速度与效率;6、与其他命令的交互;7、影响的持久性;8、语法和执行;9、触发器与约束;10、事务处理。本专题为大家提供相关的文章、下载、课程内容,供大家免费下载体验。

209

2023.12.29

C++ 单元测试与代码质量保障
C++ 单元测试与代码质量保障

本专题系统讲解 C++ 在单元测试与代码质量保障方面的实战方法,包括测试驱动开发理念、Google Test/Google Mock 的使用、测试用例设计、边界条件验证、持续集成中的自动化测试流程,以及常见代码质量问题的发现与修复。通过工程化示例,帮助开发者建立 可测试、可维护、高质量的 C++ 项目体系。

5

2026.01.16

热门下载

更多
网站特效
/
网站源码
/
网站素材
/
前端模板

精品课程

更多
相关推荐
/
热门推荐
/
最新课程
CSS3 教程
CSS3 教程

共18课时 | 4.6万人学习

Sass 教程
Sass 教程

共14课时 | 0.8万人学习

Pandas 教程
Pandas 教程

共15课时 | 0.9万人学习

关于我们 免责申明 举报中心 意见反馈 讲师合作 广告合作 最新更新
php中文网:公益在线php培训,帮助PHP学习者快速成长!
关注服务号 技术交流群
PHP中文网订阅号
每天精选资源文章推送

Copyright 2014-2026 https://www.php.cn/ All Rights Reserved | php.cn | 湘ICP备2023035733号