读取大文件的方法这里有三种,
第一种,使用commons-io的FileUtils的类进行读取
第二种,使用Scanner进行读取
第三种,使用cache进行读取
读取文件大小:102M
使用commons-io的FileUtils类进行读取
public static void testReadFile() {
try {
LineIterator lineIterator = FileUtils.lineIterator(new File("D:/test.log"), "UTF-8");
while (lineIterator.hasNext()) {
String line = lineIterator.nextLine();
System.out.println(line);
}
} catch (IOException e) {
e.printStackTrace();
}
}
读取时间在8秒左右
使用Scanner进行读取:
public static void testScannerReadFile() {
FileInputStream fileInputStream = null;
Scanner scanner = null;
try {
fileInputStream = new FileInputStream("D:/test.log");
scanner = new Scanner(fileInputStream, "UTF-8");
while (scanner.hasNext()) {
String line = scanner.nextLine();
System.out.println(line);
}
} catch (FileNotFoundException e) {
e.printStackTrace();
} finally {
if (fileInputStream != null) {
try {
fileInputStream.close();
} catch (IOException e) {
e.printStackTrace();
}
}
if (scanner != null) {
scanner.close();
}
}
}
读取时间在10秒左右
使用cache读取
public static void readCache() {
String filename = "D:/test.log";
File file = new File(filename);
BufferedReader reader = null;
try {
reader = new BufferedReader(new FileReader(file), 10 * 1024 * 1024); //读大文件 设置缓存
String tempString = null;
while ((tempString = reader.readLine()) != null) {
System.out.println(tempString);
}
reader.close();
} catch (IOException e) {
e.printStackTrace();
} finally {
if (reader != null) {
try {
reader.close();
} catch (IOException e) {
e.printStackTrace();
}
}
}
}
读取时间在8秒左右,与commons-io的FileUtils不相上下,我这边暂时没有更大的文件进行比较如果,有更大的文件,欢迎进行测试比较。
读取大文件性能测试
发表于:2017-01-09
作者:网络转载
来源:
- 周排行
- 月排行
-   如何回答性能优化的问题,才能打动阿...
-   一遇“高并发”系统就难逃一“崩”,...
-   性能测试经验分享:合格的性能测试工...
-   基于目标TPS的性能测试,如何通过手动...
-   性能测试工具开发
-   容器:软件性能测试的最佳环境
-   如何准备性能测试数据?
-   性能测试面试总结
-   阿里研究员:测试稳定性三板斧,我怎...
-   性能测试平台效率优化的一次经验(Pyt...
-   性能测试过程中部分指标关联
-   关于软件性能测试的总结
-   性能测试从零开始实施指南——文档建设篇
-   libcopp(v2) vs goroutine性能测试
