这篇文章介绍使用java.nio.charset.charsetdecoder自动识别字符集方法
研究了在网上能找到的自动识别字符集的办法，有效的就是利用第三方类库jchardet。也有用cpdetector，其实也是利用jchardet。偶然发现jdk的java.nio.charset.CharsetDecoder可以用来识别字符集。
一、原理
一般用两种方法构建InputStreamReader：
InputStreamReader reader = new InputStreamReader(in, charsetName);
无论做任何事情，都要有一定的方式方法与处理步骤。计算机程序设计比日常生活中的事务处理更具有严谨性、规范性、可行性。为了使计算机有效地解决某些问题，须将处理步骤编排好，用计算机语言组成“序列”，让计算机自动识别并执行这个用计算机语言组成的“序列”，完成预定的任务。将处理问题的步骤编排好，用计算机语言组成序列，也就是常说的编写程序。在Pascal语言中，执行每条语句都是由计算机完成相应的操作。编写Pascal程序，是利用Pasca
立即学习“Java免费学习笔记（深入）”；
或者
InputStreamReader reader = new InputStreamReader(in, charset);
立即学习“Java免费学习笔记（深入）”；
如果charset不匹配，则输出乱码。
还有一种构建方法，即利用CharsetDecoder：
CharsetDecoder cd = charset.newDecoder(); InputStreamReader reader = new InputStreamReader(in, cd);
立即学习“Java免费学习笔记（深入）”；
这时如果不匹配，则抛出异常：
java.nio.charset.MalformedInputException: Input length = 1
at java.nio.charset.CoderResult.throwException(CoderResult.java:277)
at sun.nio.cs.StreamDecoder.implRead(StreamDecoder.java:338)
at sun.nio.cs.StreamDecoder.read(StreamDecoder.java:177)
....
立即学习“Java免费学习笔记（深入）”；
这样，就可以用作字符集探测。
二、AutoCharsetReader的使用
AutoCharsetReader是根据上述原理，参考InputStreamReader而写成的类，继承Reader，可以看作为Charset自适应的InputStreamReader。
AutoCharsetReader ar= new AutoCharsetReader(in);char c = ar.read(); ...char[] cbuf = new char[2000]; ar.read(cbuf); ... BufferedReader br = new BufferedReader(ar); br.readLine(); ...
立即学习“Java免费学习笔记（深入）”；
再比如Lucene创建全文索引的TextField需要Reader参数，可以直接利用这个类：
Field field = new TextField("content", new AutoCharsetReader(file));
立即学习“Java免费学习笔记（深入）”；
读完文件之后，可以得到文件的charset。注意，是读完之后。
Charset charset = ar.charset();
立即学习“Java免费学习笔记（深入）”；
三、备选字符集
因为采用多次尝试的办法来最终确定字符集，所以要提供备选。当前代码提供的默认备选字符集如下：
private final static String[] _defaultCharsets = {
"US-ASCII", "UTF-8", "GB2312",
"BIG5", "GBK", "GB18030",
"UTF-16BE",
"UTF-16LE",
"UTF-16", "UNICODE"};
立即学习“Java免费学习笔记（深入）”；
也提供了更改备选字符集的方法。比如：
AutoCharsetReader ar = new AutoCharsetReader(in).setCharset("ascii", "utf-8", "gbk");
立即学习“Java免费学习笔记（深入）”；
先后顺序会影响探测结果。比如，如果GBK在GB2312之前，则检测结果只能是GBK，不会是GB2312，因为GBK包含GB2312。
四、只作字符集检测
可以只用作字符集检测：
charset = AutoCharsetReader.quickDetect(file.toURI().toURL(), charsets); or: charset = AutoCharsetReader.deepDetect(file.toURI().toURL(), charsets, stops);
立即学习“Java免费学习笔记（深入）”；
quickDetect只读一个字符，适用于单字符集文件。对于html，可能需要全部读完才知道charset，则使用deepDetect。其中参数charsets可以为null。
如果一组文件，已知可能的字符集有“ascii”，“utf-8”，“gb2312”，和“gbk”，当检测得知一个文件的字符集为“utf-8”或"gbk"的时候，可以马上返回结果，无需继续读文件。这时可以把stops参数赋值为{"utf-8", "gbk"}。为null则需全部读完。
五、其他
为提高效率，本类设有buffer，初选的字符集解码失败，不必重新读取io。buffer大小默认为8192，对象构建时可以自定义buffer大小，若参数小于16，则设为16。
