SELECT IN для большого набора

Question

В моем веб-приложении я хочу узнать, какие из друзей пользователя в Twitter уже существуют в системе ... В настоящее время я занимаюсь получением списка идентификаторов Twitter, которые пользователь следующее (Twitter API возвращает идентификаторы 5000 в то время), и делает:

SELECT userId FROM users WHERE userId IN (COMMA_SEPARATED_LIST_OF_IDs); 

Я не чувствую себя комфортно об этом запросе, потому что, как пользователи таблица растет, это может оказаться горлышком бутылки. Я тоже не хочу оптимизировать досрочно, так же как я должен это делать?

Обновление: Я использую MySQL.

Answer 1

Вы можете создать новую таблицу и начать хранить все идентификаторы твиттера, которыми следуют ваши пользователи. Затем определение того, кто уже находится в вашей системе, будет простым объединением индексированных столбцов. Вы можете использовать API Twitter для загрузки и обновления этой таблицы по своему усмотрению.

Answer 2

Вы можете использовать функцию EXISTS, если это Transact SQL. Я не уверен, работает ли EXISTS в других базах данных, потому что я работаю только в SQL Server.

http://msdn.microsoft.com/en-us/library/ms188336.aspx

Answer 3

два подхода:

1. SELECT IN (expr) имеет возможность иметь выражение SELECT для expr. То есть база данных может обрабатывать большое количество данных здесь.

2. Используйте соединение.

Answer 4

Я предполагаю, что user.userId является вашим основным ключом. Если это так, он уже будет проиндексирован, поэтому поиск должен быть уже эффективным. Ожидаете ли вы, что ваш COMMA_SEPARATED_LIST_OF_IDS будет расти без причины?