2016-12-28 2 views
1

Я пытаюсь запустить искру из oozie, и у меня есть два действия в рабочем процессе oozie, и они работают параллельно. Однако, когда Оози запустил другой, он застревает до тех пор, пока не будет завершен метод sparksession.getorcreate().sparksession метод getorcreate застрял до запуска другой искровой работы

self.spark_session = SparkSession.builder.master(master).appName(appName).config(conf=conf).enableHiveSupport().getOrCreate() 

ответ

1

Если вы бежите на ПРЯЖИ - открыт Ресурсный UI Manager и проверьте, есть ли достаточно ресурсов для всех рабочих мест (например, vCores/память).