Как получить общие элементы/слова?

Question

У меня есть огромный список слов (около 50K), хранящихся в db (я использую activerecord), что я хотел бы использовать и получать совпадающие слова против фрагмента текста.

Я знаю, рубин обеспечивает Пересечения

t = "this is a sample text, was created for demo" 
w = ["is","a","was","to","and"] 

t.split & w #=> ["is", "a", "was"] 

Но как я могу сделать это за 50К слов? Частота такого матча, вероятно, будет около 1000 раз в день.

Answer 1

Как насчет использования полнотекстовых поисковых систем для этого? Вот некоторые ссылки:

1. Thinking Sphinx драгоценный камень для поисковой системы Sphinx.
2. RSolr драгоценный камень для поисковой системы Solr.

Я понимаю, что это может быть излишним для вашей текущей задачи, но это наиболее подходящее и эффективное решение для более сложных вариантов.