Pagination with Aerospike Nodejs client

Question

У меня есть настройка сервера с nodejs и Aerospike. Я хочу реализовать разбиение на страницы для перечисления всех данных в наборах аэрокосмической базы данных. Aerospike, похоже, не поддерживает параметры sql-запроса, такие как limit, orderBy или skip. Использование LList частично решает проблему, поскольку данные по умолчанию упорядочены по ключу. Также, возможно, используя список Aerospike Lua, мы можем частично реализовать UDF для использования list.take(number of elements from start). Однако, поскольку набор предположительно будет расти с течением времени, OrderBy и Skip станут очень важными и не могут быть эффективно реализованы фильтрацией UDF. Можно ли предположить, как справиться с этим?

Answer 1

Как вы уже упоминали, Aerospike не поддерживает ограничение & orderby типа запросов. Способ обойти ограничение заключается в создании вторичного индекса в столбце и запроса вторичного индекса диапазона. Предположим, вы создали столбец с монотонно увеличивающимися значениями. Вы можете сделать запрос диапазона от 1 до 50, а затем от 51 до 100 и так далее.

Вы можете использовать UDF с агрегацией, где вы фильтруете записи. Но это будет не очень эффективно, так как заданное сканирование будет обрабатывать все записи набора, а фильтр UDF даст только 50 (некоторые n) результатов. По мере того, как размер набора увеличивается, вы в конечном итоге теряете массу обработки.