0

0

C++中如何实现内存映射文件 跨平台文件内存映射技术

P粉602998670

P粉602998670

发布时间:2025-08-07 09:06:02

|

857人浏览过

|

来源于php中文网

原创

内存映射文件是将文件内容映射到进程地址空间,实现高效读写和进程间通信。1. windows 下通过 createfile、createfilemapping 和 mapviewoffile 实现;2. linux 使用 open、mmap 和 munmap 完成映射;3. 跨平台兼容可通过抽象接口与条件编译封装不同实现;4. 注意检查返回值、处理对齐、线程安全及性能适用性。合理封装后,内存映射适用于大文件处理且易于维护。

C++中如何实现内存映射文件 跨平台文件内存映射技术

在C++中实现内存映射文件,是一种高效操作大文件的方式。它通过将文件内容直接映射到进程的地址空间,使得程序可以像访问内存一样读写文件内容,避免了频繁的系统调用和缓冲区拷贝。

C++中如何实现内存映射文件 跨平台文件内存映射技术

要实现跨平台的内存映射文件,就需要分别处理不同操作系统下的实现方式。Windows 和 Linux 在这方面有各自的 API 接口,因此需要做一定的封装或条件编译。

C++中如何实现内存映射文件 跨平台文件内存映射技术

什么是内存映射文件?

内存映射文件(Memory-Mapped File)是操作系统提供的一种机制,允许将一个文件或一部分文件的内容映射到进程的虚拟地址空间中。一旦映射成功,程序就可以通过指针直接访问文件数据,而不需要使用传统的 read/write 调用。

立即学习C++免费学习笔记(深入)”;

这种方式的优势包括:

C++中如何实现内存映射文件 跨平台文件内存映射技术
  • 减少 I/O 操作次数
  • 提高大文件处理效率
  • 可用于进程间通信(IPC)

常见于日志分析、数据库引擎、配置文件读取等场景。


Windows 下如何实现内存映射?

在 Windows 平台上,主要涉及以下几个步骤:

  1. 使用
    CreateFile
    打开目标文件
  2. 使用
    CreateFileMapping
    创建一个文件映射对象
  3. 使用
    MapViewOfFile
    将文件映射到当前进程的地址空间

基本代码结构如下:

HANDLE hFile = CreateFile(L"test.txt", GENERIC_READ, 0, NULL, OPEN_EXISTING, FILE_ATTRIBUTE_NORMAL, NULL);
HANDLE hMap = CreateFileMapping(hFile, NULL, PAGE_READONLY, 0, 0, NULL);
void* pData = MapViewOfFile(hMap, FILE_MAP_READ, 0, 0, 0);

// 使用pData读取文件内容...

UnmapViewOfFile(pData);
CloseHandle(hMap);
CloseHandle(hFile);

注意:所有句柄都必须在使用完毕后关闭,否则会导致资源泄漏。

DeepL
DeepL

DeepL是一款强大的在线AI翻译工具,可以翻译31种不同语言的文本,并可以处理PDF、Word、PowerPoint等文档文件

下载

Linux 下如何实现内存映射?

Linux 系统使用的是 POSIX 标准接口,主要包括

open
mmap
munmap
几个函数。

实现流程如下:

  1. 使用
    open
    打开文件
  2. 使用
    mmap
    映射文件到内存
  3. 操作完成后使用
    munmap
    解除映射

示例代码:

int fd = open("test.txt", O_RDONLY);
struct stat sb;
fstat(fd, &sb);
char* addr = (char*) mmap(NULL, sb.st_size, PROT_READ, MAP_PRIVATE, fd, 0);

// 使用addr访问文件内容...

munmap(addr, sb.st_size);
close(fd);

其中,

MAP_PRIVATE
表示只读共享映射,不会影响原始文件。


如何实现跨平台兼容?

为了在不同平台上统一使用内存映射功能,通常的做法是:

  • 定义一个抽象类或结构体作为接口
  • 针对不同平台编写各自的实现
  • 使用宏定义控制编译路径

例如:

#ifdef _WIN32
    // Windows 实现
#else
    // Linux 实现
#endif

关键点在于统一对外暴露的接口,比如:

class MemoryMappedFile {
public:
    bool open(const std::string& path);
    void close();
    const char* data() const;
    size_t size() const;

private:
    void* _data;
    size_t _size;
};

这样上层逻辑可以完全不关心底层细节,提高可维护性。


常见问题与注意事项

  • 映射失败处理:每次调用映射函数都要检查返回值,如
    mmap
    返回
    MAP_FAILED
    MapViewOfFile
    返回 NULL。
  • 对齐问题:某些系统要求映射大小按页对齐(通常是4KB),否则会自动调整。
  • 多线程安全:多个线程同时访问映射区域时要注意同步。
  • 性能考量:对于小文件,传统 IO 方式可能更简单高效;内存映射更适合大文件或频繁随机访问的场景。

基本上就这些。只要理解平台差异并做好封装,实现跨平台的内存映射并不复杂但容易忽略细节。

相关专题

更多
c语言中null和NULL的区别
c语言中null和NULL的区别

c语言中null和NULL的区别是:null是C语言中的一个宏定义,通常用来表示一个空指针,可以用于初始化指针变量,或者在条件语句中判断指针是否为空;NULL是C语言中的一个预定义常量,通常用来表示一个空值,用于表示一个空的指针、空的指针数组或者空的结构体指针。

231

2023.09.22

java中null的用法
java中null的用法

在Java中,null表示一个引用类型的变量不指向任何对象。可以将null赋值给任何引用类型的变量,包括类、接口、数组、字符串等。想了解更多null的相关内容,可以阅读本专题下面的文章。

435

2024.03.01

golang结构体相关大全
golang结构体相关大全

本专题整合了golang结构体相关大全,想了解更多内容,请阅读专题下面的文章。

195

2025.06.09

golang结构体方法
golang结构体方法

本专题整合了golang结构体相关内容,请阅读专题下面的文章了解更多。

187

2025.07.04

硬盘接口类型介绍
硬盘接口类型介绍

硬盘接口类型有IDE、SATA、SCSI、Fibre Channel、USB、eSATA、mSATA、PCIe等等。详细介绍:1、IDE接口是一种并行接口,主要用于连接硬盘和光驱等设备,它主要有两种类型:ATA和ATAPI,IDE接口已经逐渐被SATA接口;2、SATA接口是一种串行接口,相较于IDE接口,它具有更高的传输速度、更低的功耗和更小的体积;3、SCSI接口等等。

1017

2023.10.19

PHP接口编写教程
PHP接口编写教程

本专题整合了PHP接口编写教程,阅读专题下面的文章了解更多详细内容。

62

2025.10.17

php8.4实现接口限流的教程
php8.4实现接口限流的教程

PHP8.4本身不内置限流功能,需借助Redis(令牌桶)或Swoole(漏桶)实现;文件锁因I/O瓶颈、无跨机共享、秒级精度等缺陷不适用高并发场景。本专题为大家提供相关的文章、下载、课程内容,供大家免费下载体验。

400

2025.12.29

线程和进程的区别
线程和进程的区别

线程和进程的区别:线程是进程的一部分,用于实现并发和并行操作,而线程共享进程的资源,通信更方便快捷,切换开销较小。本专题为大家提供线程和进程区别相关的各种文章、以及下载和课程。

480

2023.08.10

Java 桌面应用开发(JavaFX 实战)
Java 桌面应用开发(JavaFX 实战)

本专题系统讲解 Java 在桌面应用开发领域的实战应用,重点围绕 JavaFX 框架,涵盖界面布局、控件使用、事件处理、FXML、样式美化(CSS)、多线程与UI响应优化,以及桌面应用的打包与发布。通过完整示例项目,帮助学习者掌握 使用 Java 构建现代化、跨平台桌面应用程序的核心能力。

36

2026.01.14

热门下载

更多
网站特效
/
网站源码
/
网站素材
/
前端模板

精品课程

更多
相关推荐
/
热门推荐
/
最新课程
PostgreSQL 教程
PostgreSQL 教程

共48课时 | 7.2万人学习

Git 教程
Git 教程

共21课时 | 2.7万人学习

关于我们 免责申明 举报中心 意见反馈 讲师合作 广告合作 最新更新
php中文网:公益在线php培训,帮助PHP学习者快速成长!
关注服务号 技术交流群
PHP中文网订阅号
每天精选资源文章推送

Copyright 2014-2026 https://www.php.cn/ All Rights Reserved | php.cn | 湘ICP备2023035733号