Java高效读取大文件实例分析

1、概述

本教程将演示如何用Java高效地读取大文件。Java——回归基础。

2、在内存中读取

读取文件行的标准方式是在内存中读取，Guava和ApacheCommonsio都提供了如下所示快速读取文件行的方法：

Files.readLines(new File(path), Charsets.UTF_8);

FileUtils.readLines(new File(path));

这种方法带来的问题是文件的所有行都被存放在内存中，当文件足够大时很快就会导致程序抛出OutOfMemoryError异常。

例如：读取一个大约1G的文件：

@Testpublic void givenUsingGuava_whenIteratingAFile_thenWorks() throws IOException {  String path = ...  Files.readLines(new File(path), Charsets.UTF_8);}