MAX (ID) с функцией сравнения функции IN()

Question

Я столкнулся с проблемой производительности с этим запросом. Я долго смотрел на эту проблему, царапая голову. В какой-то момент этот запрос был довольно быстрым, но как только данные росли, он становился все медленнее и медленнее. Таблица «Сообщений» имеет +5 миллионов строк, таблица «Items» имеет +6000 строк. Эти таблицы постоянно растут ежедневно.

SELECT Posts.itemID, Items.itemName, Items.itemImage, Items.guid, Posts.price, 
Posts.quantity, Posts.date, Games.name, Items.profit FROM Items 
INNER JOIN Posts ON Items.itemID=Posts.itemID 
INNER JOIN Games ON Posts.gameID=Games.gameID 
WHERE Posts.postID IN (SELECT MAX(postID) FROM Posts GROUP BY itemID) AND Posts.gameID=:gameID 
    AND Posts.price BETWEEN :price_min AND :price_max 
    AND Posts.quantity BETWEEN :quant_min AND :quant_max 
    AND Items.profit BETWEEN :profit_min AND :profit_max 
ORDER BY Items.profit DESC LIMIT 0, 20 

В коде я разделил запрос и дополнительный запрос на два. Вместе они работали медленнее. Все это было хорошо и хорошо, пока данные в сообщениях и статьях не начали расти. Операторы 'where', которые я вставлял **, получают конкатенацию в зависимости от того, какие фильтры установлены.

Вот EXPLAIN, который я получаю. (Это запрос, без вспомогательного запроса) https://docs.google.com/file/d/0B1jxMdMfC35VeDBEbnJISmNGb3c/edit?usp=sharing

SHOW INDEX FROM Сообщений:

+-------+------------+----------+--------------+-------------+-----------+-------------+----------+--------+------+------------+---------+---------------+ 
| Table | Non_unique | Key_name | Seq_in_index | Column_name | Collation | Cardinality | Sub_part | Packed | Null | Index_type | Comment | Index_comment | 
+-------+------------+----------+--------------+-------------+-----------+-------------+----------+--------+------+------------+---------+---------------+ 
| Posts |   0 | PRIMARY |   1 | postID  | A   |  5890249 |  NULL | NULL |  | BTREE  |   |    | 
| Posts |   1 | itemID |   1 | itemID  | A   |  16453 |  NULL | NULL | YES | BTREE  |   |    | 
| Posts |   1 | gameID |   1 | gameID  | A   |   18 |  NULL | NULL | YES | BTREE  |   |    | 
+-------+------------+----------+--------------+-------------+-----------+-------------+----------+--------+------+------------+---------+---------------+ 

SHOW INDEX FROM Items;

+-------+------------+----------+--------------+-------------+-----------+-------------+----------+--------+------+------------+---------+---------------+ 
| Table | Non_unique | Key_name | Seq_in_index | Column_name | Collation | Cardinality | Sub_part | Packed | Null | Index_type | Comment | Index_comment | 
+-------+------------+----------+--------------+-------------+-----------+-------------+----------+--------+------+------------+---------+---------------+ 
| Items |   0 | PRIMARY |   1 | itemID  | A   |  6452 |  NULL | NULL |  | BTREE  |   |    | 
+-------+------------+----------+--------------+-------------+-----------+-------------+----------+--------+------+------------+---------+---------------+ 

ПОКАЖИТЕ ИНДЕКС ИЗ Игры;

+-------+------------+----------+--------------+-------------+-----------+-------------+----------+--------+------+------------+---------+---------------+ 
| Table | Non_unique | Key_name | Seq_in_index | Column_name | Collation | Cardinality | Sub_part | Packed | Null | Index_type | Comment | Index_comment | 
+-------+------------+----------+--------------+-------------+-----------+-------------+----------+--------+------+------------+---------+---------------+ 
| Games |   0 | PRIMARY |   1 | gameID  | A   |  2487 |  NULL | NULL |  | BTREE  |   |    | 
+-------+------------+----------+--------------+-------------+-----------+-------------+----------+--------+------+------------+---------+---------------+ 

Есть в любом случае я могу сделать этот запрос быстрее? У вас есть какие-то советы? Есть ли лучший способ написать этот запрос? Вся помощь приветствуется.

EXPLAIN Предлагаемый запрос:

+----+-------------+------------+--------+-----------------------+---------+---------+----------------------------+---------+----------------------------------------------+ 
    | id | select_type | table  | type | possible_keys   | key  | key_len | ref      | rows | Extra          | 
    +----+-------------+------------+--------+-----------------------+---------+---------+----------------------------+---------+----------------------------------------------+ 
    | 1 | PRIMARY  | <derived2> | ALL | NULL     | NULL | NULL | NULL      |  19 | Using temporary; Using filesort    | 
    | 1 | PRIMARY  | p   | eq_ref | PRIMARY,itemID,gameID | PRIMARY | 4  | q.postID     |  1 |            | 
    | 1 | PRIMARY  | i   | eq_ref | PRIMARY    | PRIMARY | 2  | db323245342342345.p.itemID |  1 | Using where         | 
    | 1 | PRIMARY  | g   | eq_ref | PRIMARY    | PRIMARY | 4  | db323245342342345.p.gameID |  1 | Using where         | 
    | 2 | DERIVED  | p   | ref | itemID,gameID   | gameID | 2  |       | 2945124 | Using where; Using temporary; Using filesort | 
    | 2 | DERIVED  | i   | eq_ref | PRIMARY    | PRIMARY | 2  | db323245342342345.p.itemID |  1 | Using where         | 
    +----+-------------+------------+--------+-----------------------+---------+---------+----------------------------+---------+----------------------------------------------+ 

Answer 1

Не уверен, если это поможет, но попробуйте переместить подзапрос до конца вашей ИНЕКЕ, а также попробовать сделать это коррелированных подзапросов. Переместите фильтр по элементам вверх.

SELECT 
p1.itemID, 
Items.itemName, 
Items.itemImage, 
Items.guid, 
p1.price, 
p1.quantity, 
p1.date, 
Games.name, 
Items.profit 
FROM Items 
INNER JOIN Posts p1 ON Items.itemID=p1.itemID 
INNER JOIN Games ON p1.gameID=Games.gameID 
WHERE Items.profit BETWEEN :profit_min AND :profit_max 
    AND p1.gameID=:gameID 
    AND p1.price BETWEEN :price_min AND :price_max 
    AND p1.quantity BETWEEN :quant_min AND :quant_max 
    AND p1.postID IN (SELECT MAX(p2.postID) FROM posts p2 WHERE p2.itemID = p1.ItemID GROUP BY p2.itemID) 
ORDER BY 
Items.profit DESC 
LIMIT 0, 20 

• Кроме того, убедитесь, что вы создаете индекс на столбы (Itemid, GameID,) сообщения дана

Answer 2

попытаться переписать его с JOIN. Что-то вроде

SELECT p.itemID, 
     i.itemName, 
     i.itemImage, 
     i.guid, 
     p.price, 
     p.quantity, 
     p.date, 
     g.name, 
     i.profit 
    FROM 
(
    SELECT MAX(postID) postID 
     FROM Posts p JOIN Items i 
     ON p.itemID = i.itemID 
    WHERE p.gameID = :gameID 
     AND p.price BETWEEN :price_min AND :price_max 
     AND p.quantity BETWEEN :quant_min AND :quant_max 
     AND i.profit BETWEEN :profit_min AND :profit_max 
    GROUP BY itemID 
) q JOIN Posts p 
    ON q.postID = p.postID JOIN Items i 
    ON p.itemID = i.itemID JOIN Games g 
    ON p.gameID = g.gameID 
ORDER BY i.profit DESC 
LIMIT 0, 20