Фильтрация контента на основе слов

Question

Для проекта, над которым я работаю, я показываю твиты, которые я получаю от API Streaming от Twitter. Перед отображением твита мне нужно проверить каждое слово на список вложенных в черный список слов.

В настоящее время у меня есть все вложенные в черный список слова в коллекции MongoDB.

Очевидным способом, который приходит мне на ум, является взорвать твит, чтобы получить каждое слово, а затем для каждого слова в чириканье проверьте, содержит ли коллекция черного списка это слово.

Однако это будет означать ~ 20 запросов к базе данных за твит, которые я показываю.

Есть ли лучший способ сделать это?

Answer 1

Я бы выбрал все вложенные в черный список слова из базы данных, сохранил их внутри переменной как строку (разделенную |) и использовал preg_match(), чтобы узнать, есть ли в чириканье.

$blacklist = 'blacklisted|words'; 
if (preg_match('/\b(' . $blacklist . ')\b/i', $tweet)) 
{ 
    // Don't show 
} 
else 
{ 
    // Show the tweet 
}