Как передать файлы csv из Google Cloud Storage в Azure Datalake Store

Question

Я бы хотел, чтобы наши ежедневные файлы журнала CSV были переданы из GCS в Azure Datalake Store, но я не могу понять, что было бы самым простым способом для Это. Есть ли встроенное решение для этого? Могу ли я сделать это с помощью Data Factory? Я предпочел бы избежать запуска виртуальной машины, запланированной для этого с помощью apis. Идея исходит из решения GCS -> (DataFlow ->) BigQuery. Спасибо за любые идеи!

Answer 1

Да, вы можете перемещать данные из Google Cloud Storage в Azure Data Lake Store с использованием Azure Data Factory, разрабатывая специальную операцию копирования. Однако в этом упражнении вы будете использовать API для передачи этих данных. Подробности см. На странице this.