Как сделать токенизацию строки в Javascript?

Question

У меня есть строка:

'"Apples" AND "Bananas" OR "Gala Melon"' 

Я хотел бы, чтобы преобразовать это в массив

arr = ['"Apples"', 'AND', '"Bananas"', 'OR', '"Gala Melon"'] 

Я не знаю, смогу ли я сделать это с помощью регулярного выражения. Я начинаю думать, что мне, возможно, придется разбирать каждого персонажа за раз, чтобы соответствовать двойным кавычкам.

Answer 1

input = '"Apples" AND "Bananas" OR "Gala Melon"' 

output = input.match(/\w+|"[^"]+"/g) 
// output = ['"Apples"', 'AND', '"Bananas"', 'OR', '"Gala Melon"'] 

Объяснение регулярное выражение:

/ - начало регулярных выражений
\w+ - последовательность символов слова
| - или
"[^"]+" - ничего цитируемый (предполагая, что не избежал кавычки)
/g - конец регулярного выражения, глобальный флаг (выполнить несколько совпадений)