Java - самый быстрый способ чтения текстовых файлов Char Char Char

Question

У меня есть почти 500 текстовых файлов с 10 миллионами слов. Я должен индексировать эти слова. Каков самый быстрый способ читать из текстового файла по характеру? Вот моя первоначальная попытка:

InputStream ist = new FileInputStream(this.path+"/"+doc); 
BufferedReader in = new BufferedReader(new InputStreamReader(ist)); 

String line; 

while((line = in.readLine()) != null){ 


    line = line.toUpperCase(Locale.ENGLISH); 
    String word = ""; 

    for (int j = 0; j <= line.length(); j++) { 
     char c= line.charAt(j); 
    // OPERATIONS 

} 

Answer 1

Метод read() InputStreamReader может считывать символ за раз.

Вы можете обернуть его вокруг FileReader или BufferedReader или примера.

Надеюсь, это поможет!

Answer 2

read() не даст существенных отличий в производительности.

Подробнее: Peter Lawery's comparison of read() and readLine()

Теперь, возвращаясь к первоначальному вопросу:
Введите строку: hello how are you?
Так что вам нужно индексировать слова линии, а именно:

BufferedReader r = new BufferedReader(new InputStreamReader(inputStream)); 
String line; 
while ((line = r.readLine()) != null) { 
    String[] splitString = line.split("\\s+"); 
    //Do stuff with the array here, i.e. construct the index. 
} 

Примечание: Образец \\s+ помещает разделитель в строку как любые пробелы, такие как вкладка, пробел и т. Д.

Answer 3

Не читайте строки, а затем повторно просматривайте строковые символы char. Таким образом, вы обрабатываете каждый символ дважды. Просто прочитайте символы через BufferedReader.read().