Split String, чтобы получить разделители слов

Question

Я хочу найти все разделители между словами в предложении, которые могут быть пробелами, символами новой строки.

Скажем, у меня есть следующие строки:

String text = "hello, darkness my old friend.\nI've come to you again\r\nasd\n 123123"; 

String[] separators = text.split("\\S+"); 

Выход: [, , , , , , , , , , , ]

Так что я разделить на что угодно, но в пространстве она возвращается пустой разделитель в первой, а остальные хорошие. Почему пустая строка сначала?

Кроме того, я хотел бы разделить на периоды и запятые. Но я не знаю, как это сделать, что ".\n" является разделителем.

Wanted Вывод для приведенных выше строк:

separators = {", ", " ", " ", " ", ".\n", " ", " ", " ", " ", "\r\n", "\n "} 

или

separators = {",", " ", " ", " ", " ", ".", "\n", " ", " ", " ", " ", "\r\n", "\n "} 

Answer 1

Попробуйте это:

String[] separators = text.split("[\\w']+"); 

Это определяет не разделители как «словарные символы» и/или апострофы.

Это оставит ведущий пробел в результирующем массиве, который не удается избежать, за исключением удаления ведущего слова первым:

String[] separators = text.replaceAll("^[\\w']+", "").split("[\\w']+"); 

Вы можете рассмотреть возможность добавления дефиса к классу символов, если вы рассмотрим дефис слова (например, в предыдущем предложении) как одно слово, т.е.

String[] separators = text.split("[\\w'-]+"); 

См live demo.

Answer 2

Я думаю, что это также может работать правильно:

String[] separators = text.split("\\w+");

Answer 3

Если думает, что это более простой в использовании метода .find() для получения желаемого результата:

String text = "hello, darkness my old friend.\nI've come to you again\r\nasd\n 123123"; 

String pat = "[\\s,.]+"; // add all that you need to the character class 
Matcher m = Pattern.compile(pat).matcher(text); 

List<String> list = new ArrayList<String>(); 

while(m.find()) { 
    list.add(m.group()); 
} 

// the result is already stored in "list" but if you 
// absolutely want to store the result in an array, just do: 

String[] result = list.toArray(new String[0]); 

Таким образом, вы избежать пустой строки проблемы в самом начале.