Каков наилучший способ переноса больших данных из Vertica в redshift?

Question

Мы разместили vertica на AWS, а общий размер db - 500 ГБ. Итак, каков самый быстрый способ переноса данных из Vertica в redshift?

один подход будет
1. экспортом данных Vertica в S3
2. Загрузка данных из S3 красных смещений.

Есть ли лучший подход?

Answer 1

Есть три способа, чтобы получить данные в красное смещение:

1. Загрузи его от s3
2. загрузить его из DynamoDB
3. ли вставка запрос

Вставка запросы, даже объемные из них , ограничены производительностью узла-лидера вашего крафт-переключателя. Варианты №1 и №2 лучше, так как вставка данных выполняется параллельно/с помощью вычислительных узлов кластера.

обновление: теперь есть 4-й вариант, загрузка через ssh: http://docs.aws.amazon.com/redshift/latest/dg/loading-data-from-remote-hosts.html