java: как преобразовать файл в utf8

Question

У меня есть файл с некоторыми не-utf8-символами (например, «ISO-8859-1»), поэтому я хочу преобразовать этот файл (или прочитать) в кодировку UTF8, как я могу это сделать?

код это так:

File file = new File("some_file_with_non_utf8_characters.txt"); 

/* some code to convert the file to an utf8 file */ 

... 

редактировать: Поместите пример кодирования

Answer 1

String charset = "ISO-8859-1"; // or what corresponds 
    BufferedReader in = new BufferedReader( 
     new InputStreamReader (new FileInputStream(file), charset)); 
    String line; 
    while((line = in.readLine()) != null) { 
    .... 
    } 

Там у вас есть текст декодируется. Вы можете записать его с помощью симметричных методов Writer/OutputStream с помощью кодировки, которую вы предпочитаете (например, UTF-8).

Answer 2

Вы только хотите, чтобы прочитать его как UTF-8? То, что я недавно давал аналогичную проблему, - это запустить JVM с -Dfile.encoding = UTF-8 и читать/печатать как обычно. Я не знаю, применимо ли это в вашем случае.

С этой опцией:

System.out.println("á é í ó ú") 

печатает правильно символы. В противном случае он печатает? символ

Answer 3

Вам необходимо знать кодировку входного файла. Например, если файл находится в Latin-1, вы могли бы сделать что-то вроде этого,

 FileInputStream fis = new FileInputStream("test.in"); 
     InputStreamReader isr = new InputStreamReader(fis, "ISO-8859-1"); 
     Reader in = new BufferedReader(isr); 
     FileOutputStream fos = new FileOutputStream("test.out"); 
     OutputStreamWriter osw = new OutputStreamWriter(fos, "UTF-8"); 
     Writer out = new BufferedWriter(osw); 

     int ch; 
     while ((ch = in.read()) > -1) { 
      out.write(ch); 
     } 

     out.close(); 
     in.close(); 

Answer 4

Следующий код преобразует файл из srcEncoding в tgtEncoding:

public static void transform(File source, String srcEncoding, File target, String tgtEncoding) throws IOException { 
    BufferedReader br = null; 
    BufferedWriter bw = null; 
    try{ 
     br = new BufferedReader(new InputStreamReader(new FileInputStream(source),srcEncoding)); 
     bw = new BufferedWriter(new OutputStreamWriter(new FileOutputStream(target), tgtEncoding)); 
     char[] buffer = new char[16384]; 
     int read; 
     while ((read = br.read(buffer)) != -1) 
      bw.write(buffer, 0, read); 
    } finally { 
     try { 
      if (br != null) 
       br.close(); 
     } finally { 
      if (bw != null) 
       bw.close(); 
     } 
    } 
} 

--EDIT--

Использование Try-с-ресурсов (Java 7):

public static void transform(File source, String srcEncoding, File target, String tgtEncoding) throws IOException { 
    try (
     BufferedReader br = new BufferedReader(new InputStreamReader(new FileInputStream(source), srcEncoding)); 
     BufferedWriter bw = new BufferedWriter(new OutputStreamWriter(new FileOutputStream(target), tgtEncoding));) { 
      char[] buffer = new char[16384]; 
      int read; 
      while ((read = br.read(buffer)) != -1) 
       bw.write(buffer, 0, read); 
    } 
}