Предельные записи с SQL в Access

Question

Мы получаем базу данных доступа (.accdb) из внешнего источника и не имеем контроля над структурой или данными. Нам нужно глотать данные в нашу БД с помощью кода. Это означает, что у меня есть контроль над SQL.

Наша проблема заключается в том, что одна таблица содержит почти 13 тыс. Записей (в настоящее время 12,997) и занимает много времени для обработки. Я хотел бы запросить данные из исходной БД, но только предопределенное количество записей за один раз - скажем, 1000 за раз.

Я пробовал генерировать свой запрос внутри цикла, где я обновляю число записей, возвращаемых с каждым циклом. До сих пор, единственное, что я обнаружил, что приближается к обработке что-то вроде этого:

SELECT * 
FROM ( 
     SELECT Top + pageSize + sub.* 
     FROM ( 
       SELECT TOP + startPos + [Product Description Codes].* 
       FROM [Product Description Codes] 
       ORDER BY [Product Description Codes].PRODDESCRIPCODE 
     ) sub 
     ORDER BY sub.PRODDESCRIPCODE DESC 
) subOrdered 
ORDER BY subOrdered.PRODDESCRIPCODE 

Где увеличиваем PAGESIZE и StartPos с каждой петлей. Проблема в том, что он всегда возвращает 1000 строк, даже на том, что, как я думаю, должен быть последним циклом, когда он должен возвращать только 997, а затем возвращать ноль после этого.

Может ли кто-нибудь помочь мне с этим? У меня нет другой колонки для фильтрации. Есть ли способ выбрать определенное количество записей в цикле, а затем увеличивать это число до тех пор, пока я не получу все записи, а затем остановитесь?

Answer 1

Если PRODDESCRIPCODE является первичным ключом, вы можете упростить выбор. то есть:

SELECT TOP 1000 * ИЗ [коды товара] где PRODDESCRIPCODE> @pcode;

и начать с передачи параметра @pcode 0 (если int или «если текст и т. Д.). В следующем цикле вы должны установить параметр в max PRODDESCRIPCODE, который вы получили.

(Я не уверен, что вы имели в виду MS SQL-сервер, говорящий SQL и как вы это делаете).

Answer 2

Вам абсолютно необходимо обновлять записи, или вы можете вставить всю таблицу доступа в свою локальную таблицу, пощекотать в поле метки времени и структурировать свои локальные запросы, чтобы захватить самую последнюю запись? Основываясь на некоторых ваших комментариях выше, не похоже, что у вас есть случаи, когда вы сохраняете локальную запись поверх импортированной.

SELECT PRODDESCRIPCODE, MAX(timestamp) FROM table GROUP BY PRODDESCRIPCODE

Answer 3

Я закончил с использованием вариацию метода здесь: http://www.jertix.org/en/blog/programming/implementation-of-sql-pagination-with-ms-access.html

Спасибо всем большое за ваши предложения.