Как разбить строку на слова, включая разделители

Question

Как разбить текст на слова в .NET, возвращая как слова, так и их разделители и знаки препинания.

Вход:

"Hello world! What's up?" 

Вывод:? 'Hello', '', 'мир', '', '', 'Что',»», 'вверх', ''

Answer 1

(?=[^\w'])|(?<=[^\w']) 

Вы можете разделить на это. См. Демонстрационную версию.

https://regex101.com/r/iJ7bT6/15

Answer 2

вар выход = Regex.Split (вход, "([^ А-Z0-9])", RegexOptions.IgnoreSpace);

Answer 3

Используйте это регулярное выражение:

'(?=[^\w'])|(?<=[^\w'])`