S(1)文本文件的編碼方式識別

java識別文本文件的編碼方式應用很廣,而且進行檢測識別的開源項目也不少,這裏說的是開源juniversalchardet,juniversalchardet是用的mozilla的universalchardet庫。 java

簡單的測試用例(案例來自於juniversalchardet官方網站,juniversalchardet jar文件下載官方網站http://code.google.com/p/juniversalchardet/) 測試

import org.mozilla.universalchardet.UniversalDetector; 
public class TestDetector {   
public static void main(String[] args) throws java.io.IOException {    
    byte[] buf = new byte[4096];     
    String fileName = args[0];     
    java.io.FileInputStream fis = new java.io.FileInputStream(fileName);       
    UniversalDetector detector = new UniversalDetector(null);     
    int nread;    
    while ((nread = fis.read(buf)) > 0 && !detector.isDone()) {      
        detector.handleData(buf, 0, nread);     
    }  
    detector.dataEnd();     
    String encoding = detector.getDetectedCharset();     
    if (encoding != null) {     
         System.out.println("Detected encoding = " + encoding);    
     } else {      
         System.out.println("No encoding detected.");    
     }    
    }
 }

(僅給你們推薦一個識別文件編碼方式的方法) 

















網站

相關文章
相關標籤/搜索