Удаление из таблицы с миллионами записей

Question

Я пытаюсь найти способ сделать условный DELETE на таблице InnoDB, которая содержит миллионы записей, не блокируя ее (таким образом, не доводя сайт вниз).

Я попытался найти информацию о mysql.com, но безрезультатно. Любые советы о том, как действовать?

Answer 1

Я не думаю, что можно удалить без блокировки. Тем не менее, я не думаю, что блокировка записи, которую вы хотите удалить, является проблемой. Что будет проблемой, так это блокирование других строк.

Я нашел некоторую информацию по этому вопросу здесь: http://dev.mysql.com/doc/refman/5.0/en/innodb-locks-set.html

То, что я хотел бы предложить, это попытаться сделать миллион однорядные удалений. Я думаю, что если вы делаете все это в одной транзакции, производительность не должна сильно задевать. так что вы получите что-то вроде:

START TRANSACTION; 

DELETE FROM tab WHERE id = 1; 
.. 
.. 
DELETE FROM tab WHERE id = x; 

COMMIT; 

Вы можете создавать необходимые statments делать что-то вроде

SELECT CONCAT('DELETE FROM tab WHERE id = ', id) 
FROM tab 
WHERE <some intricate condition that selects the set you want to delete> 

поэтому преимущество над этим методом вместо делать:

DELETE FROM tab 
WHERE <some intricate condition that selects the set you want to delete> 

что в первом подходе вы только блокируете запись, которую вы удаляете, тогда как во втором подходе вы рискуете заблокировать другие записи, которые находятся в том же диапазоне, что и строка вы удаляете.

Answer 2

Если это подходит вашему приложению, вы можете ограничить количество удаляемых строк и настроить cronjob для повторения удаления. Например:

DELETE FROM tab WHERE .. LIMIT 1000 

Я нашел, что это хороший компромисс в аналогичном сценарии.