Разбиение файла в Java на многопоточность

Question

Для проекта, над которым я работаю, я стараюсь как можно быстрее подсчитать гласные в текстовом файле. Для этого я пытаюсь использовать параллельный подход. Мне было интересно, можно ли одновременно читать текстовый файл, чтобы ускорить подсчет? Я считаю, что узким местом является ввод-вывод, и поскольку сейчас я читаю файл через буферизованный читатель и обрабатываю строку за строкой, мне было интересно, можно ли сразу прочитать несколько разделов файла.

Моя первоначальная мысль была использовать Split File - Java/Linux

но видимо MappedByteBuffers не большой производительности мудрый, и я по-прежнему нужно читать построчно из каждого MappedByteBuffer раз я разделил.

Другим вариантом является разделение после прочтения определенного количества строк, но это побеждает цель.

Поблагодарили бы за любую помощь.

Answer 1

Следующий раздел НЕ будет разбит файл - но может помочь при его одновременной обработке!

Использование потоков в Java 8 вы можете сделать что-то вроде:

Stream<String> lines = Files.lines(Paths.get(filename)); 
lines.filter(StringUtils::isNotEmpty) // ignore empty lines 

, и если вы хотите работать параллельно вы можете сделать:

lines.parallel().filter(StringUtils::isNotEmpty) 

В примере выше я фильтрации пустых строк - но, конечно, вы можете изменить его на свое использование (подсчитывая гласные), реализуя свой собственный метод и называя его.