0

0

如何用PHP的XMLReader和XMLWriter处理大文件

幻夢星雲

幻夢星雲

发布时间:2025-12-29 17:12:43

|

216人浏览过

|

来源于php中文网

原创

PHP 的 XMLReader 和 XMLWriter 可流式处理 GB 级 XML 文件,不加载全文到内存;XMLReader 逐节点读取、内存仅数百 KB,XMLWriter 边写边输出、实时生成,二者组合可实现边读边转的低内存 ETL 处理。

如何用php的xmlreader和xmlwriter处理大文件

用 PHP 的 XMLReaderXMLWriter 处理大 XML 文件,核心是**流式读写、不加载全文到内存**。它们专为节省内存而设计,适合 GB 级 XML——只要逻辑清晰、节点边界明确,就能稳定运行。

用 XMLReader 逐节点流式读取

XMLReader 是只读游标式解析器,像“文件指针”一样前进,每次只载入当前节点(甚至可配置为只读特定标签)。它不构建 DOM 树,内存占用通常仅几百 KB。

  • 创建实例后调用 open() 打开文件(支持本地路径、URL、甚至 php://memory
  • read() 向前移动到下一个节点;用 moveToElement()moveToAttribute() 切换上下文
  • 通过 nodeType 判断类型(XMLReader::ELEMENTXMLReader::TEXTXMLReader::END_ELEMENT)来识别开始标签、文本内容、结束标签
  • 对目标元素(如 ),可用 readInnerXML() 获取其完整子树(仍流式,不全载入),或配合 expand() 转成 SimpleXML/DOMNode 做局部处理

示例:提取所有 下的 文本

$reader = new XMLReader();
$reader->open('books.xml');
while ($reader->read()) {
    if ($reader->nodeType == XMLReader::ELEMENT && $reader->localName == 'title') {
        $reader->read(); // 移动到 TEXT 节点
        if ($reader->nodeType == XMLReader::TEXT) {
            echo $reader->value . "\n";
        }
    }
}
$reader->close();

用 XMLWriter 流式生成大 XML 文件

XMLWriter 是“边写边输出”的生成器,调用 writeElement()startElement() 等方法时直接写入目标(文件、字符串、stream),不缓存整棵树。

久久企业网站后台管理系统1.0
久久企业网站后台管理系统1.0

一、功能简介本软件完全适应大、中、小型网站建设需要,让您用很便宜的虚拟主机空间也可以开通4个独立的网站!久久企业网站后台管理系统各种版本开发基础架构均为php+mysql+div+css+伪静态,迎合搜索引擎排名的喜好。另外值得一提的是本站特色的TAG系统可为您的网站做出无限分类,不用任何设置全站ULR伪静态!本建站系统除了有产品发布、新闻(软文)发布、订单管理系统和留言反馈等一些最基本的功能之外

下载

立即学习PHP免费学习笔记(深入)”;

  • openURI() 指向文件路径,或 openMemory() + outputMemory() 分块获取内容
  • 注意手动配对 startElement() / endElement(),避免标签嵌套错乱
  • 写属性用 writeAttribute(),写 CDATA 用 writeCData(),写注释用 writeComment()
  • 若需格式化缩进,启用 setIndent(true) 并设 setIndentString(" ") ,但会轻微增加开销,大文件中可酌情关闭

示例:生成含 10 万条记录的 文件

$writer = new XMLWriter();
$writer->openURI('users.xml');
$writer->startDocument('1.0', 'UTF-8');
$writer->startElement('users');

for ($i = 1; $i <= 100000; $i++) {
    $writer->startElement('user');
    $writer->writeAttribute('id', (string)$i);
    $writer->writeElement('name', "User $i");
    $writer->writeElement('email', "user$i@example.com");
    $writer->endElement(); // 
}

$writer->endElement(); // 
$writer->endDocument();
$writer->flush();

Reader + Writer 组合:边读边转(如格式转换、过滤)

这是最典型的大文件处理场景:读一个大 XML,按规则清洗/筛选/重组,实时写入新文件。全程内存可控,适合 ETL 类任务。

  • 保持两个对象实例:一个 XMLReader 读源文件,一个 XMLWriter 写目标文件
  • XMLReader 的深度(depth)或命名判断当前是否在目标数据块内(例如 内才开始写)
  • 对需保留的节点,用 $reader->readOuterXML() 获取原始片段直接写入(跳过解析),提升速度;对需修改的节点,读出值再由 XMLWriter 重写
  • 注意编码一致性:确保 XMLReaderXMLWriter 都使用 UTF-8(源文件声明、open 参数、startDocument 第二参数均需匹配)

避坑要点与性能提示

  • 始终检查 open() 返回值,失败时 libxml_get_errors() 可查具体错误(如编码不匹配、BOM 头干扰)
  • 避免在循环中频繁调用 expand() 转 DOM —— 它会把当前节点子树载入内存,大节点可能崩
  • XMLReader::setParserProperty(XMLReader::SUBST_ENTITIES, false) 关闭实体替换,防止恶意 &xx; 耗尽内存
  • 写文件时,用 ob_flush() + flush() 强制输出缓冲(尤其配合 web SAPI 时),但 CLI 下通常无需
  • 测试时先用小样本验证逻辑,再用真实大文件跑,观察内存峰值(memory_get_peak_usage())是否稳定在几 MB 内

相关文章

PHP速学教程(入门到精通)
PHP速学教程(入门到精通)

PHP怎么学习?PHP怎么入门?PHP在哪学?PHP怎么学才快?不用担心,这里为大家提供了PHP速学教程(入门到精通),有需要的小伙伴保存下载就能学习啦!

下载

本站声明:本文内容由网友自发贡献,版权归原作者所有,本站不承担相应法律责任。如您发现有涉嫌抄袭侵权的内容,请联系admin@php.cn

相关专题

更多
php文件怎么打开
php文件怎么打开

打开php文件步骤:1、选择文本编辑器;2、在选择的文本编辑器中,创建一个新的文件,并将其保存为.php文件;3、在创建的PHP文件中,编写PHP代码;4、要在本地计算机上运行PHP文件,需要设置一个服务器环境;5、安装服务器环境后,需要将PHP文件放入服务器目录中;6、一旦将PHP文件放入服务器目录中,就可以通过浏览器来运行它。

1834

2023.09.01

php怎么取出数组的前几个元素
php怎么取出数组的前几个元素

取出php数组的前几个元素的方法有使用array_slice()函数、使用array_splice()函数、使用循环遍历、使用array_slice()函数和array_values()函数等。本专题为大家提供php数组相关的文章、下载、课程内容,供大家免费下载体验。

1219

2023.10.11

php反序列化失败怎么办
php反序列化失败怎么办

php反序列化失败的解决办法检查序列化数据。检查类定义、检查错误日志、更新PHP版本和应用安全措施等。本专题为大家提供php反序列化相关的文章、下载、课程内容,供大家免费下载体验。

1108

2023.10.11

php怎么连接mssql数据库
php怎么连接mssql数据库

连接方法:1、通过mssql_系列函数;2、通过sqlsrv_系列函数;3、通过odbc方式连接;4、通过PDO方式;5、通过COM方式连接。想了解php怎么连接mssql数据库的详细内容,可以访问下面的文章。

948

2023.10.23

php连接mssql数据库的方法
php连接mssql数据库的方法

php连接mssql数据库的方法有使用PHP的MSSQL扩展、使用PDO等。想了解更多php连接mssql数据库相关内容,可以阅读本专题下面的文章。

1396

2023.10.23

html怎么上传
html怎么上传

html通过使用HTML表单、JavaScript和PHP上传。更多关于html的问题详细请看本专题下面的文章。php中文网欢迎大家前来学习。

1229

2023.11.03

PHP出现乱码怎么解决
PHP出现乱码怎么解决

PHP出现乱码可以通过修改PHP文件头部的字符编码设置、检查PHP文件的编码格式、检查数据库连接设置和检查HTML页面的字符编码设置来解决。更多关于php乱码的问题详情请看本专题下面的文章。php中文网欢迎大家前来学习。

1439

2023.11.09

php文件怎么在手机上打开
php文件怎么在手机上打开

php文件在手机上打开需要在手机上搭建一个能够运行php的服务器环境,并将php文件上传到服务器上。再在手机上的浏览器中输入服务器的IP地址或域名,加上php文件的路径,即可打开php文件并查看其内容。更多关于php相关问题,详情请看本专题下面的文章。php中文网欢迎大家前来学习。

1303

2023.11.13

俄罗斯搜索引擎Yandex最新官方入口网址
俄罗斯搜索引擎Yandex最新官方入口网址

Yandex官方入口网址是https://yandex.com;用户可通过网页端直连或移动端浏览器直接访问,无需登录即可使用搜索、图片、新闻、地图等全部基础功能,并支持多语种检索与静态资源精准筛选。本专题为大家提供相关的文章、下载、课程内容,供大家免费下载体验。

1

2025.12.29

热门下载

更多
网站特效
/
网站源码
/
网站素材
/
前端模板

精品课程

更多
相关推荐
/
热门推荐
/
最新课程
PHP课程
PHP课程

共137课时 | 8万人学习

JavaScript ES5基础线上课程教学
JavaScript ES5基础线上课程教学

共6课时 | 6.9万人学习

PHP新手语法线上课程教学
PHP新手语法线上课程教学

共13课时 | 0.8万人学习

关于我们 免责申明 举报中心 意见反馈 讲师合作 广告合作 最新更新
php中文网:公益在线php培训,帮助PHP学习者快速成长!
关注服务号 技术交流群
PHP中文网订阅号
每天精选资源文章推送

Copyright 2014-2025 https://www.php.cn/ All Rights Reserved | php.cn | 湘ICP备2023035733号