转自: http://morle.javaeye.com/blog/197473
最近项目中要用到对大文件进行操作,做了下JAVA io方面的测试
对于java.io包中的FileOutputStream,BufferedOutputStream和FileWriter三个不同类写入到文本文件性能,
测试代码和结果如下:
环境: 机器ibm thinkpad 61i,
配置:2.0G双核CPU,2G内存,操作系统xp sp2,java api1.5.
- import java.io.BufferedOutputStream;
- import java.io.File;
- import java.io.FileOutputStream;
- import java.io.FileWriter;
- public class TestTxtWriter {
- public TestTxtWriter() {
- }
- public static void main(String[] args) {
- FileOutputStream out = null;
- FileOutputStream outSTr = null;
- BufferedOutputStream Buff = null;
- FileWriter fw = null;
- int count = 10000000;
- try {
- out = new FileOutputStream(new File("D:/FileOutputStream.txt"));
- long begin = System.currentTimeMillis();
- for (int i = 0; i < count; i++) {
- out.write("测试FileOutputStream,BufferedOutputStream和FileWriter,对文件写操作/r/n".getBytes());
- }
- out.close();
- long end = System.currentTimeMillis();
- System.out.println("FileOutputStream执行耗时:" + (end - begin) + " 豪秒");
- outSTr = new FileOutputStream(new File("D:/BufferedOutputStream.txt"));
- Buff = new BufferedOutputStream(outSTr);
- long begin0 = System.currentTimeMillis();
- for (int i = 0; i < count; i++) {
- Buff.write("测试FileOutputStream,BufferedOutputStream和FileWriter,对文件写操作/r/n" .getBytes());
- }
- Buff.flush();
- Buff.close();
- long end0 = System.currentTimeMillis();
- System.out.println("BufferedOutputStream执行耗时:" + (end0 - begin0) + " 豪秒");
- fw = new FileWriter("D:/FileWriter.txt");
- long begin3 = System.currentTimeMillis();
- for (int i = 0; i < count; i++) {
- fw.write("测试FileOutputStream,BufferedOutputStream和FileWriter,对文件写操作/r/n");
- }
- fw.close();
- long end3 = System.currentTimeMillis();
- System.out.println("FileWriter执行耗时:" + (end3 - begin3) + " 豪秒");
- } catch (Exception e) {
- e.printStackTrace();
- } finally {
- try {
- fw.close();
- Buff.close();
- outSTr.close();
- out.close();
- } catch (Exception e) {
- e.printStackTrace();
- }
- }
- }
- }
以下结果经过多次执行,取常出现的数据,由于只是简单比较,不做详细统计。
1.当count=1 000的,即写文件1 000行的时候,写出的文件大小为66.4KB:
FileOutputStream执行耗时:31 豪秒
BufferedOutputStream执行耗时:16 豪秒
FileWriter执行耗时:0 豪秒
2.当count=10 000的,即写文件10 000行的时候,写出的文件大小为664KB:
FileOutputStream执行耗时:78 豪秒
BufferedOutputStream执行耗时:32 豪秒
FileWriter执行耗时:15 豪秒
3.当count=100 000的,即写文件100 000行的时候,写出的文件大小为6.7MB:
FileOutputStream执行耗时:453 豪秒
BufferedOutputStream执行耗时:172 豪秒
FileWriter执行耗时:156 豪秒
4.当count=1 000 000的,即写文件1 000 000行的时候,写出的文件大小为64.8MB:
FileOutputStream执行耗时:4500 豪秒
BufferedOutputStream执行耗时:2422 豪秒
FileWriter执行耗时:2500 豪秒
5.当count=10 000 000的,即写文件10 000 000行的时候,写出的文件大小为648MB:
FileOutputStream执行耗时:52453 豪秒
BufferedOutputStream执行耗时:25921 豪秒
FileWriter执行耗时:36094 豪秒
FileOutputStream执行耗时:51547 豪秒
BufferedOutputStream执行耗时:35203 豪秒
FileWriter执行耗时:31609 豪秒
FileOutputStream执行耗时:50078 豪秒
BufferedOutputStream执行耗时:33515 豪秒
FileWriter执行耗时:29516 豪秒
由以上数据可以看到,如果不用缓冲流BufferedOutputStream,FileOutputStream写文件的鲁棒性是很不好的。当写 10 000 000行的文件的时候,FileOutputStream比FileWriter要慢10 000-21 000毫秒(10-21秒)。
不要小看这几秒的时间。当操作的数据量很大的时候,这点性能的差距就会很大了。在操作数据库,通过java导出生成数亿条记录文件的时候,等待的时间要10分钟以上,性能相差大了。