inputStreamまたはinputStreamReaderをバッファリングする必要がありますか?
-
27-09-2019 - |
質問
次の2つのバッファリングアプローチの間の違いは何ですか?
Reader r1 = new BufferedReader(new InputStreamReader(in, "UTF-8"), bufferSize);
Reader r2 = new InputStreamReader(new BufferedInputStream(in, bufferSize), "UTF-8");
解決
r1
より効率的です。 InputStreamReader
それ自体には大きなバッファがありません。 BufferedReader
より大きなバッファーを持つように設定できます InputStreamReader
. 。 InputStreamReader
の r2
ボトルネックとして機能します。
ナットで:ボトルを介してではなく、目標到達プロセスを介してデータを読む必要があります。
アップデート: :ここに小さなベンチマークプログラムがあります。ファイルを準備する必要はありません。
package com.stackoverflow.q3459127;
import java.io.BufferedInputStream;
import java.io.BufferedReader;
import java.io.BufferedWriter;
import java.io.File;
import java.io.FileInputStream;
import java.io.FileWriter;
import java.io.IOException;
import java.io.InputStreamReader;
import java.io.Reader;
public class Test {
public static void main(String... args) throws Exception {
// Init.
int bufferSize = 10240; // 10KB.
int fileSize = 100 * 1024 * 1024; // 100MB.
File file = new File("/temp.txt");
// Create file (it's also a good JVM warmup).
System.out.print("Creating file .. ");
BufferedWriter writer = null;
try {
writer = new BufferedWriter(new FileWriter(file));
for (int i = 0; i < fileSize; i++) {
writer.write("0");
}
System.out.printf("finished, file size: %d MB.%n", file.length() / 1024 / 1024);
} finally {
if (writer != null) try { writer.close(); } catch (IOException ignore) {}
}
// Read through funnel.
System.out.print("Reading through funnel .. ");
Reader r1 = null;
try {
r1 = new BufferedReader(new InputStreamReader(new FileInputStream(file), "UTF-8"), bufferSize);
long st = System.nanoTime();
for (int data; (data = r1.read()) > -1;);
long et = System.nanoTime();
System.out.printf("finished in %d ms.%n", (et - st) / 1000000);
} finally {
if (r1 != null) try { r1.close(); } catch (IOException ignore) {}
}
// Read through bottle.
System.out.print("Reading through bottle .. ");
Reader r2 = null;
try {
r2 = new InputStreamReader(new BufferedInputStream(new FileInputStream(file), bufferSize), "UTF-8");
long st = System.nanoTime();
for (int data; (data = r2.read()) > -1;);
long et = System.nanoTime();
System.out.printf("finished in %d ms.%n", (et - st) / 1000000);
} finally {
if (r2 != null) try { r2.close(); } catch (IOException ignore) {}
}
// Cleanup.
if (!file.delete()) System.err.printf("Oops, failed to delete %s. Cleanup yourself.%n", file.getAbsolutePath());
}
}
私の緯度E5500での結果 シーゲートの運動量7200.3 ハードディスク:
Creating file .. finished, file size: 99 MB. Reading through funnel .. finished in 1593 ms. Reading through bottle .. finished in 7760 ms.
他のヒント
r1
ラインベースのストリームを次のように読むと、より便利です BufferedReader
サポート readLine
方法。 Charアレイバッファーにコンテンツを読み取ったり、1つずつ請求する必要はありません。ただし、キャストする必要があります r1
に BufferedReader
または、変数にそのタイプを明示的に使用します。
私はこのコードスニペットをよく使用します:
BufferedReader br = ...
String line;
while((line=br.readLine())!=null) {
//process line
}
上記のコメントでのロススタッドマンの質問に応えて(ただし、OPにも関連しています):
BufferedReader reader = new BufferedReader(new InputStreamReader(new BufferedInputSream(inputStream), "UTF-8"));
BufferedInputStream
不要です(そして、外部のコピーのためにパフォーマンスに害を及ぼす可能性があります)。これは、 BufferedReader
からの文字を要求します InputStreamReader
呼び出して大きなチャンクで InputStreamReader.read(char[], int, int)
, 、順番に(スルー StreamDecoder
)電話 InputStream.read(byte[], int, int)
基礎となるバイトの大きなブロックを読むには InputStream
.
次のコードを実行することで、これがそうであると確信できます。
new BufferedReader(new InputStreamReader(new ByteArrayInputStream("Hello world!".getBytes("UTF-8")) {
@Override
public synchronized int read() {
System.err.println("ByteArrayInputStream.read()");
return super.read();
}
@Override
public synchronized int read(byte[] b, int off, int len) {
System.err.println("ByteArrayInputStream.read(..., " + off + ", " + len + ')');
return super.read(b, off, len);
}
}, "UTF-8") {
@Override
public int read() throws IOException {
System.err.println("InputStreamReader.read()");
return super.read();
}
@Override
public int read(char[] cbuf, int offset, int length) throws IOException {
System.err.println("InputStreamReader.read(..., " + offset + ", " + length + ')');
return super.read(cbuf, offset, length);
}
}).read(); // read one character from the BufferedReader
次の出力が表示されます。
InputStreamReader.read(..., 0, 8192)
ByteArrayInputStream.read(..., 0, 8192)
これは、次のことを示しています BufferedReader
からの大量のキャラクターを要求します InputStreamReader
, 、順番に大きなバイトの塊を要求します InputStream
.
FWIW、あなたが開いている場合 ファイル Java 8では、を使用できます files.newbufferedreader(パス). 。パフォーマンスがここで説明されている他のソリューションとどのように比較されるかはわかりませんが、少なくともJDKにバッファリングする構成の決定を押し進めます。