Зависимости EMR и Spark после создания кластера

Question

Возможно ли установить дополнительные библиотеки/зависимости после того, как кластер уже запущен и работает?

Вещи, которые я сделал, связанные с этим:

• Я уже сделал процесс самонастройки предварительного создания (это другое решение в целом)
• в качестве альтернативы, SSH'd в каждый узла и установленных зависимостей после того, как кластер подходит

Я думаю, что решение для установки после запуска будет включать в себя возможность отпустить команду всем исполнителям из драйвера. Есть ли способ сделать это?

Answer 1

Если вам нужны дополнительные зависимости от ваших шагов, вы можете добавить их в команду шага (т. Е. Для Spark использовать параметр --jars)