Я triying представить Спарк работу Oozie используя класс SparkSubmit Java искру, как предложено вOozie трассировки стека
launching a spark program using oozie workflow но действие Java не удалось с сообщением об ошибке
Основной класс [org.apache .oozie.action.hadoop.JavaMain], код выхода [1]
Есть ли способ получить доступ к журналу ошибок выполнения/стеку, чтобы я мог видеть, что на самом деле произошло? Любые комментарии/ответы приветствуются.
Чтобы перейти в журнал действий java, вы можете использовать веб-консоль oozie, чтобы найти идентификатор задания hadoop этого действия. И затем используйте Huaop's Yarn WebUI, чтобы посмотреть в журнал настройки карьеры hadoop.
С интерфейсом командной строки, указанные выше шаги будут:
Run oozie CMD, чтобы получить Hadoop ID работы:
oozie job -info <your job id here>
и искать "Внешний идентификатор" в выходных данных, как: job_200904281535_0254
CMD Запуск пряжи, чтобы получить журнал Hadoop работу:
yarn logs -applicationId <your app id here>
вы можете получить идентификатор приложения, заменив «работу» с «приложения» в идентификатор задания, такие как application_200904281535_0254
Что такое код ошибки? Зайдите в oozie web ui для подачи заявки. – Kumar