0

0

Laravel如何实现数据导出到CSV文件_Laravel原生流式输出大数据量CSV【方案】

冰火之心

冰火之心

发布时间:2025-12-31 17:01:53

|

534人浏览过

|

来源于php中文网

原创

流式导出是唯一靠谱方案,因Storage::put()等会全量写入内存或磁盘导致内存溢出、超时和中断;必须用response()->stream()配合chunkById()、fputcsv()和BOM写入实现边查边写。

laravel如何实现数据导出到csv文件_laravel原生流式输出大数据量csv【方案】

直接用 response()->stream() 是唯一靠谱的方案,否则内存爆掉、超时、导出中断全是大概率事件。

为什么不能用 Storage::put()file_put_contents() 生成 CSV 后再下载

因为整个文件会先写入内存或磁盘临时文件,数据量一过 10 万行,PHP 内存很容易突破 memory_limit(哪怕设到 512M 也扛不住百万级);而且用户得等全部写完才开始下载,体验差、易超时。

流式输出的核心是边查边写边响应,不缓存整张表:

  • 数据库查询用 chunkById() 或游标分页(避免 OFFSET 深度翻页性能崩塌)
  • 每批数据立即写入 php://output,不落地
  • 响应头必须提前设置好 Content-TypeContent-Disposition

如何用 response()->stream() 实现真正流式 CSV 导出

关键不是“怎么生成 CSV”,而是“怎么把生成过程挂进响应流”。Laravel 的 stream() 接收一个回调函数,每次响应刷出前调用它一次——你就在这个回调里做「连接数据库 → 分批取数据 → 格式化为 CSV 行 → fputcsv() 写入 stdout」的事。

注意三点:

  • 回调函数内不能用 Eloquent 的 get()all(),必须用 chunkById(500, ...) 控制单次内存占用
  • fputcsv() 第二个参数必须是数组,字段顺序要和 header 严格一致
  • 务必在回调开头用 ob_end_clean() 清掉可能存在的输出缓冲,否则 CSV 里混入空格或 HTML 就打不开
public function exportCsv()
{
    $headers = [
        'Content-Type' => 'text/csv',
        'Content-Disposition' => 'attachment; filename="users.csv"',
    ];

    $callback = function () {
        $handle = fopen('php://output', 'w');
        fputcsv($handle, ['ID', 'Name', 'Email', 'Created At']);

        User::orderBy('id')->chunkById(500, function ($users) use ($handle) {
            foreach ($users as $user) {
                fputcsv($handle, [
                    $user->id,
                    str_replace(["\n", "\r"], ' ', $user->name),
                    $user->email,
                    $user->created_at->format('Y-m-d H:i:s'),
                ]);
            }
        });

        fclose($handle);
    };

    return response()->stream($callback, 200, $headers);
}

遇到 Maximum execution time of X seconds exceeded 怎么办

不是加 set_time_limit(0) 就完事。流式导出本质是长连接,Web 服务器(Nginx/Apache)和 PHP-FPM 都有各自超时限制,漏掉任何一个都会断连。

必须同步调整三处:

知了追踪
知了追踪

AI智能信息助手,智能追踪你的兴趣资讯

下载
  • PHP:set_time_limit(0) 放在 stream 回调最开头(不是控制器方法里)
  • PHP-FPM:request_terminate_timeout 设为 0 或足够大(如 3600)
  • Nginx:proxy_read_timeoutfastcgi_read_timeout 都要设成 > 导出预估耗时

另外,chunkById() 的 size 别盲目调大——500~1000 是较稳的平衡点;太大单次查询慢,太小网络 I/O 次数多,反而拖慢整体速度。

中文乱码、Excel 打开显示一堆问号怎么办

不是编码没设 UTF-8,而是 Excel 默认不认 UTF-8 BOM。Windows 上的 Excel 要靠 BOM 识别编码,否则一律当 ANSI 解析。

解决办法只有一条:在 CSV 内容最开头手动写入 UTF-8 BOM 字节\xEF\xBB\xBF)。

但注意:BOM 必须在第一次 fputcsv() 之前写入,且只能写一次,不能写进每行数据里:

$handle = fopen('php://output', 'w');
fwrite($handle, "\xEF\xBB\xBF"); // ← 这一行最关键
fputcsv($handle, ['ID', '姓名', '邮箱']); // 中文 header 正常了

如果用的是 Laravel 10+,response()->stream() 默认禁用输出缓冲,但某些 Swoole 或 RoadRunner 环境仍可能拦截 BOM,这时得确认底层是否吞掉了开头字节——最保险的方式是改用 response()->streamDownload()(Laravel 10.29+)并显式传入 BOM 前缀。

流式导出真正的难点不在代码几行,而在于对「请求生命周期」「输出缓冲链路」「Web 服务器超时机制」这三者的交叉理解。少调一个 ob_end_clean(),少配一个 proxy_read_timeout,都可能导致导出一半失败,且错误日志里还找不到痕迹。

相关专题

更多
php文件怎么打开
php文件怎么打开

打开php文件步骤:1、选择文本编辑器;2、在选择的文本编辑器中,创建一个新的文件,并将其保存为.php文件;3、在创建的PHP文件中,编写PHP代码;4、要在本地计算机上运行PHP文件,需要设置一个服务器环境;5、安装服务器环境后,需要将PHP文件放入服务器目录中;6、一旦将PHP文件放入服务器目录中,就可以通过浏览器来运行它。

1959

2023.09.01

php怎么取出数组的前几个元素
php怎么取出数组的前几个元素

取出php数组的前几个元素的方法有使用array_slice()函数、使用array_splice()函数、使用循环遍历、使用array_slice()函数和array_values()函数等。本专题为大家提供php数组相关的文章、下载、课程内容,供大家免费下载体验。

1290

2023.10.11

php反序列化失败怎么办
php反序列化失败怎么办

php反序列化失败的解决办法检查序列化数据。检查类定义、检查错误日志、更新PHP版本和应用安全措施等。本专题为大家提供php反序列化相关的文章、下载、课程内容,供大家免费下载体验。

1193

2023.10.11

php怎么连接mssql数据库
php怎么连接mssql数据库

连接方法:1、通过mssql_系列函数;2、通过sqlsrv_系列函数;3、通过odbc方式连接;4、通过PDO方式;5、通过COM方式连接。想了解php怎么连接mssql数据库的详细内容,可以访问下面的文章。

948

2023.10.23

php连接mssql数据库的方法
php连接mssql数据库的方法

php连接mssql数据库的方法有使用PHP的MSSQL扩展、使用PDO等。想了解更多php连接mssql数据库相关内容,可以阅读本专题下面的文章。

1400

2023.10.23

html怎么上传
html怎么上传

html通过使用HTML表单、JavaScript和PHP上传。更多关于html的问题详细请看本专题下面的文章。php中文网欢迎大家前来学习。

1229

2023.11.03

PHP出现乱码怎么解决
PHP出现乱码怎么解决

PHP出现乱码可以通过修改PHP文件头部的字符编码设置、检查PHP文件的编码格式、检查数据库连接设置和检查HTML页面的字符编码设置来解决。更多关于php乱码的问题详情请看本专题下面的文章。php中文网欢迎大家前来学习。

1439

2023.11.09

php文件怎么在手机上打开
php文件怎么在手机上打开

php文件在手机上打开需要在手机上搭建一个能够运行php的服务器环境,并将php文件上传到服务器上。再在手机上的浏览器中输入服务器的IP地址或域名,加上php文件的路径,即可打开php文件并查看其内容。更多关于php相关问题,详情请看本专题下面的文章。php中文网欢迎大家前来学习。

1303

2023.11.13

php源码安装教程大全
php源码安装教程大全

本专题整合了php源码安装教程,阅读专题下面的文章了解更多详细内容。

3

2025.12.31

热门下载

更多
网站特效
/
网站源码
/
网站素材
/
前端模板

精品课程

更多
相关推荐
/
热门推荐
/
最新课程
PHP课程
PHP课程

共137课时 | 8.1万人学习

JavaScript ES5基础线上课程教学
JavaScript ES5基础线上课程教学

共6课时 | 6.9万人学习

PHP新手语法线上课程教学
PHP新手语法线上课程教学

共13课时 | 0.8万人学习

关于我们 免责申明 举报中心 意见反馈 讲师合作 广告合作 最新更新
php中文网:公益在线php培训,帮助PHP学习者快速成长!
关注服务号 技术交流群
PHP中文网订阅号
每天精选资源文章推送

Copyright 2014-2025 https://www.php.cn/ All Rights Reserved | php.cn | 湘ICP备2023035733号