Java の BOMInputStream による shift-jis と UTF の読み分け処理のサンプルコード

shift-jis と utf-8 の混在問題に関する記事(リンクリスト)に戻る

Java の Apache Commons の BOMInputStream を用いた、shift-jis と BOM有りの UTF_8, UTF_16LE, UTF_16BE, UTF_32LE, UTF_32BE を読み分ける処理のサンプルコードを掲載する。

BOMなし UTF には対応していない。BOMなしは shift-jis と見なす。

コマンドラインからJavaとコマンドクラスとファイル名を入力すると、文字エンコーディング名とテキストファイルの内容を表示する。

Apache Commons IO は以下からダウンロードして組み込む。

Commons IO – Commons IO Overview

今回は Apache Commons の BOMInputStream を使用している為、CLASSPATH で org.apache.commons.io の置かれているパスを指定する必要がある。

今回は commons-io-2.8.0.jar を使用した。

jar や CLASSPATH の参照設定は java が使える人なら分かるだろうし、開発環境によっても違うだろうから説明しない。

以下にサンプルコードを全てを掲載する。

package comio1;

import java.io.BufferedReader;
import java.io.File;
import java.io.FileInputStream;
import java.io.FileNotFoundException;
import java.io.IOException;
import java.io.InputStreamReader;
import java.nio.charset.Charset;

import org.apache.commons.io.ByteOrderMark;
import org.apache.commons.io.input.BOMInputStream;;

public class ReadTextBOM {

	private static final String SHIFTJIS = "MS932";

	public static void main(String[] args) {
		//
		if(args.length < 1) return;
		
		String filename = args[0];
		
		try(BOMInputStream bis = new BOMInputStream(
				new FileInputStream(new File(filename))
					,true
					,ByteOrderMark.UTF_8
					,ByteOrderMark.UTF_16LE
					,ByteOrderMark.UTF_16BE
					,ByteOrderMark.UTF_32LE
					,ByteOrderMark.UTF_32BE))
		{
			Charset charSetName;
			if(bis.hasBOM()) {
				charSetName = Charset.forName(bis.getBOMCharsetName());
				ByteOrderMark bom = bis.getBOM();
				byte[] buff = new byte[4];
				bis.read(buff, 0, bom.length());
			}
			else
				charSetName = Charset.forName(SHIFTJIS);
			
			System.out.println(charSetName.toString());
			
			try(BufferedReader br = new BufferedReader(
					new InputStreamReader(bis, charSetName)))
			{
				
				String text;
				while((text = br.readLine()) != null)
				{
					System.out.println(text);
				}
			};
			
		} catch (FileNotFoundException e) {
			System.out.println("FileNotFoundException " + e.getMessage());
			//e.printStackTrace();
		} catch (IOException e) {
			System.out.println("IOException " + e.getMessage());
			//e.printStackTrace();
		}

	}

}