Я новичок в Amazon Services и попытался запустить приложение в Amazon EMR.Как увидеть выход в Amazon EMR/S3?
Для этого я следовал шаги, как:
1) Создан Сценарий Hive, который содержит -> создать таблицу, о данных нагрузки в улье с некоторым файлом и выберите * из команды.
2) Создано ведро S3. И я загружаю в него объект как: Hive Script, File для загрузки в таблицу.
3) Затем создан рабочий поток (с использованием программы Sample Hive Program). С учетом ввода, вывода и сценария (например, s3n: //bucketname/script.q, s3n: //bucketname/input.txt, s3n: // bucketname/out /). Не создал каталог. Я думаю, что он будет создан автоматически.
4) Затем начнется запуск потока работ, и через некоторое время я увижу состояния, как STARTING, BOOTSTRAPING, RUNNING и SHUT DOWN.
5) При запуске состояния SHUT DOWN оно автоматически прекращается, показывая состояние FAILES для SHUT DOWN.
Тогда на S3 я не видел каталог. Как увидеть результат? Я видел каталог как демоны, узлы и т. Д.
А также как посмотреть данные из HDFS в Amazon EMR?
У меня была такая же проблема; довольно болезненно после огромной работы. К сожалению, я разрешил работу автоматически завершить работу после завершения. Вы могли отслеживать свои данные и/или причину, по которым это не удалось? –