Как сделать быстрый подсчет на больших таблицах?

Question

У меня есть большие таблицы MySQL с сотнями тысяч строк.

Мне нужно написать запрос в таблице клиентов, в которой подсчитывается количество клиентов, с которыми можно будет связаться снова.

например.

SELECT 'This week', COUNT(*) FROM customers 
WHERE sales_person_id = 1 AND DATEDIFF(NOW(), available_date) < 7 

UNION 

SELECT 'Next week', COUNT(*) FROM customers 
WHERE sales_person_id = 1 AND DATEDIFF(NOW(), available_date) >= 7 
    AND DATEDIFF(NOW(), available_date) < 14 

UNION 

... (a few more like this) 

Написав подобный запрос на другой большой стол, я заметил, что изменения двигателя от InnoDB к MyISAM ускорило запрос значительно (InnoDB не требуется для этих таблиц, поскольку они не имеют внешнего ключа проверки). Есть ли что-нибудь еще, что я могу сделать, чтобы ускорить такие подсчеты (кроме индексации соответствующих полей)?

Answer 1

WHERE sales_person_id = 1 AND available_date BETWEEN CURDATE() - INTERVAL 1 WEEK AND CURDATE()

Делая это таким образом должен позволить MySQL использовать композитный индекс, созданный на (sales_person_id, available_date) столбцов (используйте EXPLAIN, чтобы проверить)

Answer 2

Сосредоточьтесь на ИНЕКЕ.

• Есть ли индекс в полях в предложении WHERE?
• Можете ли вы заменить функцию lateiff() константой, она оценивается для каждой строки.

Answer 3

1. Никогда не делать в несколько запросов, что вы можете сделать в одном.

   Если вы создаете производную таблицу/встроенное представление, которое имеет нужный начальный период &, это может быть использовано для получения желаемого результата в одном запросе с использованием GROUP BY. MySQL не имеет рекурсивную функцию, так что вы должны использовать ЧИСЛО таблицу трюк для создания даты ...

   1. Создать таблицу, которая содержит только увеличивающееся значение - легко сделать с помощью auto_increment:

      DROP TABLE IF EXISTS `example`.`numbers`; 
      CREATE TABLE `example`.`numbers` (
      `id` int(10) unsigned NOT NULL auto_increment, 
          PRIMARY KEY (`id`) 
      ) ENGINE=InnoDB DEFAULT CHARSET=latin1; 
      

   2. Заполните таблицу, используя:

      INSERT INTO NUMBERS (id) 
      VALUES (NULL) 
      

      ... столько значений, сколько вам нужно.

   3. Используйте DATE_ADD, чтобы построить список дат, увеличивая дни на основе значения NUMBERS.id.

      SELECT x.start_dt, 
           x.end_dt 
          FROM (SELECT DATE_ADD(NOW(), INTERVAL n.id - 1 DAY) AS start_dt, 
             DATE_ADD(NOW(), INTERVAL n.id + 6 DAY) AS end_dt 
            FROM `numbers` n 
           WHERE DATE_ADD(NOW(), INTERVAL (n.id - 1) DAY) <= '2011-01-01') x 
      

   4. JOIN на свой стол данных на основе даты и времени части:

      SELECT x.start_dt, 
           x.end_dt, 
           COUNT(*) AS num 
          FROM (SELECT DATE_ADD(NOW(), INTERVAL n.id - 1 DAY) AS start_dt, 
             DATE_ADD(NOW(), INTERVAL n.id + 6 DAY) AS end_dt 
            FROM `numbers` n 
            WHERE DATE_ADD(NOW(), INTERVAL (n.id - 1) DAY) <= '2011-01-01') x 
          JOIN CUSTOMERS c ON c.available_date BETWEEN x.start_dt 
                    AND x.end_dt 
      GROUP BY x.start_dt, x.end_dt 
      

2. Не используйте функции, выполняемые на фактических данных столбца - IE: DATEDIFF(NOW(), *available_date*) - потому что база данных может используйте индекс (если таковой существует) в столбце available_date, потому что данные были изменены от значения индекса.