API для получения экземпляра экземпляра экземпляра задачи в AWS EMR

Question

Я хочу получить экземпляры экземпляров экземпляров задач в AWS EMR.

Для этого я использовал Cloudwatch, чтобы проверять сердцебиение экземпляров групп экземпляров каждой задачи. Но я думаю, что в конце EMR - это основа, использующая hadoop, а хозяин хауопа должен иметь информацию о живых узлах задач.

Может кто-нибудь скажет мне ссылку на метаданные (или любое местоположение файла), чтобы получить эту информацию?

Answer 1

Я написал инструмент Java для динамического изменения кластера EMR во время обработки. У этого есть некоторый код, чтобы получить количество экземпляров в экземпляре, как часть этого. Возможно, это будет то, что вы ищете. Проверьте это по адресу:

http://www.lopakalogic.com/articles/hadoop-articles/dynamically-resize-emr/

Исходный код доступен на Github