Поддержка запросов по документам в DynamoDB

Question

Я оцениваю миграцию нашего хранилища данных от MongoDB до DynamoDB, так как это хорошо зарекомендовавшая себя служба AWS.

Однако я не уверен, что модель данных DynamoDB достаточно надежна для поддержки наших прецедентов. Я понимаю, что DynamoDB добавил поддержку документа в 2014 году, но все примеры, которые я видел, не смотря на то, что они обращаются к запросам, которые работают с документами, и которые не указывают значение ключа раздела.

Например, если у меня есть документ, содержащий информацию сотрудника, { "имя": "John Doe", "отдел": "продажа", " date_of_joining": "2017-01-21" }

и мне нужно сделать запрос, как дать мне всех сотрудников, которые присоединились после 01-01-2016, тогда я не могу сделать это с помощью этой схемы. Возможно, я смогу сделать этот запрос после создания вторичного индекса с произвольно сгенерированным ключом раздела (например, 0-99) и создать ключ сортировки на «date_of_joining», затем запросить все разделы и поставить условие «date_of_joining», , Но это слишком сложный способ сделать простой запрос, сделать что-то подобное в MongoDB довольно просто.

Может кто-нибудь помочь с пониманием, есть ли лучший способ делать такие запросы в DynamoDB и является ли DynamoDB действительно подходящим для таких случаев использования?

Answer 1

На самом деле ключ раздела GSI не обязательно должен быть уникальным. Вы можете иметь date_of_joining в качестве ключа раздела GSI.

Однако при запросе ключа раздела вы не можете использовать greater than для поля ключа раздела. Для ключа разделов поддерживается только равенство. Я не уверен, почему вы хотели иметь случайное число в качестве ключа раздела GSI и date_of_joining в качестве ключа сортировки. Даже если вы создадите дизайн, я не уверен, что вы сможете использовать DynamicDB Query API для получения ожидаемого результата. Вы можете использовать DynamoDB Scan API, что является дорогостоящей операцией в DynamoDB.

GSI:

date_of_joining - as Partition key 

Поддерживается в Query API: -

Если у вас есть несколько элементов для того же Минюст, результат с несколькими элементов (например, при запросе с помощью GSI).

KeyConditionExpression : 'date_of_joining = :doj' 

Не поддерживается в Query API: -

KeyConditionExpression : 'date_of_joining > :doj' 

Вывод: -

Вы должны использовать DynamoDB Scan. Если вы собираетесь использовать Scan, то GSI может не понадобиться. Вы можете напрямую сканировать основную таблицу, используя FilterExpression.

FilterExpression : 'date_of_joining > :doj' 

Неудобство: -

• Дорогостоящие

• Не эффективен

Answer 2

Вы могли бы решить, чтобы поддержать ваши запросы диапазона с индексации бэкэндом. Например, вы можете передавать обновления таблиц в DynamoDB в AWS ElasticSearch с помощью функции Lambda, а затем запрашивать ES для записей, соответствующих диапазону выбранных дат присоединения.