0

0

如何使用Java的Files.lines读取大文件

P粉602998670

P粉602998670

发布时间:2025-11-10 19:21:02

|

691人浏览过

|

来源于php中文网

原创

使用Files.lines()可高效读取大文件,它返回Stream实现惰性加载,避免内存溢出;支持指定字符集如GBK;结合Stream API可过滤、统计或转换数据;需用try-with-resources防止资源泄漏;避免collect到List以防加载全部内容;也可用BufferedReader替代以获得更细粒度控制。

如何使用java的files.lines读取大文件

使用 Java 的 Files.lines() 方法读取大文件是一种高效且内存友好的方式,因为它返回一个 Stream,可以按行惰性加载内容,避免一次性将整个文件读入内存。

1. 基本用法:Files.lines() 读取文件

下面是一个简单的例子,展示如何使用 Files.lines() 逐行处理大文件:

import java.nio.file.*;
import java.io.IOException;
import java.util.stream.Stream;

public class ReadLargeFile {
    public static void main(String[] args) {
        Path path = Paths.get("large-file.txt");

        try (Stream lines = Files.lines(path)) {
            lines.forEach(System.out::println);
        } catch (IOException e) {
            System.err.println("读取文件时出错:" + e.getMessage());
        }
    }
}

这个方法适用于 UTF-8 编码的文本文件。如果文件使用其他编码(如 GBK),可以传入第二个参数指定字符集:

Charset charset = Charset.forName("GBK");
try (Stream lines = Files.lines(path, charset)) {
    lines.forEach(System.out::println);
}

2. 处理过程中过滤或转换数据

利用 Stream API,可以在读取时进行过滤、统计或转换,而不会增加内存负担:

立即学习Java免费学习笔记(深入)”;

本地宝团购导航网站
本地宝团购导航网站

本地宝团购导航网站v1.2是由本地宝提供API接口调取团购数据,使用本程不用管理接口、数据采集,只需将程序放在网站某文件夹或域名下。程序是经过SEO优化,对提升网站流量有很大帮助,如果你的网站支持rewrite伪静态的话,你可以开启伪静态功能。 后台使用 后台地址:http://域名/admin 帐号密码:jiahai jiahai

下载
try (Stream lines = Files.lines(path)) {
    long count = lines
        .filter(line -> line.contains("ERROR"))
        .count();
    System.out.println("包含 ERROR 的行数:" + count);
}

这样即使文件有几十 GB,也只会逐行处理,不会 OOM(内存溢出)。

3. 注意事项与最佳实践

  • 必须使用 try-with-resources:Files.lines() 返回的 Stream 底层持有文件句柄,不关闭会导致资源泄漏。
  • 避免 collect 到 List:不要调用 .collect(Collectors.toList()),这会把所有行加载到内存,失去流式处理优势。
  • 异常处理:文件不存在或权限不足时会抛出 IOException,需妥善捕获。
  • 性能考虑:虽然流式读取节省内存,但大量 IO 操作仍可能较慢,可结合并行流(谨慎使用)或缓冲优化。

4. 替代方案:BufferedReader 配合流

如果需要更细粒度控制,也可以用 BufferedReader 的 lines() 方法:

try (BufferedReader reader = Files.newBufferedReader(path)) {
    reader.lines().forEach(System.out::println);
}

这种方式同样支持指定编码,并且在某些复杂场景下更灵活。

基本上就这些。只要记得及时关闭流、合理使用 Stream 操作,Files.lines() 是处理大文本文件的简洁又安全的选择。

相关专题

更多
java
java

Java是一个通用术语,用于表示Java软件及其组件,包括“Java运行时环境 (JRE)”、“Java虚拟机 (JVM)”以及“插件”。php中文网还为大家带了Java相关下载资源、相关课程以及相关文章等内容,供大家免费下载使用。

832

2023.06.15

java正则表达式语法
java正则表达式语法

java正则表达式语法是一种模式匹配工具,它非常有用,可以在处理文本和字符串时快速地查找、替换、验证和提取特定的模式和数据。本专题提供java正则表达式语法的相关文章、下载和专题,供大家免费下载体验。

737

2023.07.05

java自学难吗
java自学难吗

Java自学并不难。Java语言相对于其他一些编程语言而言,有着较为简洁和易读的语法,本专题为大家提供java自学难吗相关的文章,大家可以免费体验。

734

2023.07.31

java配置jdk环境变量
java配置jdk环境变量

Java是一种广泛使用的高级编程语言,用于开发各种类型的应用程序。为了能够在计算机上正确运行和编译Java代码,需要正确配置Java Development Kit(JDK)环境变量。php中文网给大家带来了相关的教程以及文章,欢迎大家前来阅读学习。

397

2023.08.01

java保留两位小数
java保留两位小数

Java是一种广泛应用于编程领域的高级编程语言。在Java中,保留两位小数是指在进行数值计算或输出时,限制小数部分只有两位有效数字,并将多余的位数进行四舍五入或截取。php中文网给大家带来了相关的教程以及文章,欢迎大家前来阅读学习。

398

2023.08.02

java基本数据类型
java基本数据类型

java基本数据类型有:1、byte;2、short;3、int;4、long;5、float;6、double;7、char;8、boolean。本专题为大家提供java基本数据类型的相关的文章、下载、课程内容,供大家免费下载体验。

446

2023.08.02

java有什么用
java有什么用

java可以开发应用程序、移动应用、Web应用、企业级应用、嵌入式系统等方面。本专题为大家提供java有什么用的相关的文章、下载、课程内容,供大家免费下载体验。

430

2023.08.02

java在线网站
java在线网站

Java在线网站是指提供Java编程学习、实践和交流平台的网络服务。近年来,随着Java语言在软件开发领域的广泛应用,越来越多的人对Java编程感兴趣,并希望能够通过在线网站来学习和提高自己的Java编程技能。php中文网给大家带来了相关的视频、教程以及文章,欢迎大家前来学习阅读和下载。

16925

2023.08.03

Java 桌面应用开发(JavaFX 实战)
Java 桌面应用开发(JavaFX 实战)

本专题系统讲解 Java 在桌面应用开发领域的实战应用,重点围绕 JavaFX 框架,涵盖界面布局、控件使用、事件处理、FXML、样式美化(CSS)、多线程与UI响应优化,以及桌面应用的打包与发布。通过完整示例项目,帮助学习者掌握 使用 Java 构建现代化、跨平台桌面应用程序的核心能力。

36

2026.01.14

热门下载

更多
网站特效
/
网站源码
/
网站素材
/
前端模板

精品课程

更多
相关推荐
/
热门推荐
/
最新课程
Kotlin 教程
Kotlin 教程

共23课时 | 2.5万人学习

C# 教程
C# 教程

共94课时 | 6.7万人学习

Java 教程
Java 教程

共578课时 | 46万人学习

关于我们 免责申明 举报中心 意见反馈 讲师合作 广告合作 最新更新
php中文网:公益在线php培训,帮助PHP学习者快速成长!
关注服务号 技术交流群
PHP中文网订阅号
每天精选资源文章推送

Copyright 2014-2026 https://www.php.cn/ All Rights Reserved | php.cn | 湘ICP备2023035733号